Коротко
Дипфейк (от англ. Deepfake) — это бытовое название технологии для обучения нейронных сетей Face Swap (замена лица). С помощью этой технологии делают видеоролики, на которых человек выполняет и произносит то, что никогда в жизни не выполнял и не произносил. Если надо, чтобы в «Терминаторе» сыграл не Арнольд Шварценеггер, а Сильвестр Сталлоне — дипфейк поможет.
Как это работает?
Процесс строится на автоматизированном обучении. В создании дипфейка участвуют две нейронные сети. Первая — генерирует лица или голоса, а вторая определяет, похожи они на оригинал или нет. Нейросети учатся друг у друга, пока вторая не сможет отличить копию, созданную первой нейронкой, от оригинала.
Откуда берется первоначальное изображение?
Для создания дипфейка нужны запись голоса и фото или видео. С медийными личностями все просто: в сети много материалов с их участием. Если вы не знаменитость, то образцы вашего голоса и фото могут взять из социальных сетей и мессенджеров. Голосовых сообщений в общих чатах и пары десятков фото достаточно, чтобы сделать среднего качества дипфейк, который будет выглядеть и говорить, как вы.
Как отличить дипфейк от оригинала?
Качество дипфейка зависит от того, на каком количестве данных обучалась нейросеть. Чем больше данных — тем выше качество фейка. Есть несколько способов отличить подделку от оригинала:
1. Обратите внимание на разницу в качестве картинки. Если перед вами дипфейк, то вы невооруженным глазом заметите отличия в четкости прорисовки лица и остальной части видео. Увидели, что у какой-то части ролика ниже разрешение, — перед вами дипфейк. Как на этом видео, где к телу актрисы «пририсовали» лицо королевы Англии Елизаветы II.
2. Приглядитесь, насколько пропорционально смотрятся части тела. Нереальные размеры лица или других частей тела свидетельствуют о подделке. Обычно при наложении лица одного человека на тело другого нарушаются пропорции. Если масштабы объектов на видео не совпадают, то перед вами дипфейк. Например, в этом ролике головы Трампа и Байдена смотрятся непропорционального на фоне остальной массовки.
3. Посмотрите, как выполнены переходы между сценами. Если они выглядят неестественно — перед вами дипфейк. Например, при смене кадра части лица могут постепенно меняться между оригиналом и подменой. Борода и усы, родимые пятна, глаза, нос могут терять в качестве картинки или на время появиться не в тех местах. Например, как на этом ролике, где лицо Аль Пачино наложили на актера Билла Хантера.
4. Соотнесите цвет кожи в разных частях видео. Сопоставляя оттенки кожи в разных частях тела, можно увидеть разницу в цвете текстуры. Особенно хорошо это заметно, если у оригинала и подмены разные цвета или оттенки кожи. Например, в этом ролике на тело актрисы Элиссон Бри «приклеили» лицо Джима Керри. Тут отлично видно разницу в тоне кожи на теле и на голове.
Источник: Лапша Медиа
