МЕТОДЫ ВЫЯВЛЕНИЯ ДИПФЕЙКОВ БЕЗ СПЕЦИАЛЬНОГО ПО

АННОТАЦИЯ

Статья ставит своей целью рассмотреть возможности человека по обнаружению дипфейков за короткое время без использования специального программного обеспечения (ПО), а также дать оценку эффективности таких методов.

Ключевые слова: дипфейк, выявление Дипфейка, программное обеспечение, ПО.

Дипфейк

Дипфейк – это технология синтеза, использующая искусственный интеллект для создания фальшивых видео, изображений или звука. Его цель – создать максимально реалистичный материал.

Анализ визуальных артефактов

Признаками визуальных артефактов являются следующие:

• неестественное освещение и тени: часто дипфейки имеют несоответствия в освещении лица и фона, а также неестественные тени [1];
• несовпадение тона кожи: следует обратить внимание на резкие переходы между лицом и шеей, а также на неестественный цвет кожи [1];
• размытость границ: особенно вокруг лица, волос и краев. Дипфейки могут иметь нечеткие или размытые области, где лицо было “наложено” на оригинальное видео;
• нестабильность изображения: нужно обращать внимание на дрожание, мерцание или другие артефакты, особенно в области лица;
• проблемы с волосами: волосы могут выглядеть неестественно гладкими, без деталей или иметь странную форму.

Для примера рассмотрим рисунок 1:

Рисунок 1. Признаками визуальных артефактов

Из признаков, приведенных выше, мы видим неестественные тени лица, которые более заметны по сравнению с оригинальным изображением, однако требуется отметить, что несмотря на их нехватку погрешности все равно присутствуют из-за чего не так выделяются. В остальном нельзя явно заметить признаки генерации изображения, как пример, стоит отметить, что цвет кожи на шее изменен и совпадает с цветом лица, что в ином случае являлось бы признаком генерации.

• неестественные движения губ: синхронизация губ с аудио может быть неточной, неестественной или выглядеть прерывистой;
• неестественные моргания: частота моргания может быть ненормальной (слишком редкой или слишком частой);
• отсутствие микровыражений: лицо может казаться “застывшим” и не выражать естественные эмоции;
• неестественная мимика: некоторые мимические движения могут выглядеть преувеличенными или неестественными;
• движения головы и тела не соответствуют речи: несогласованность между движениями и словами может указывать на подделку.

Зачастую дипфейки используются в видео файлах и имеют разную природу подобно обычной генерации изображения, а также часто более трудное создание аватара, который требует гораздо больше времени, но имеет возможность изменения, в том числе теней хоть они также могут выглядеть неестественно [2]. В качестве примера возьмем кадр из интервью (Рис. 2.):

Рисунок 2. Кадр из интервью

Слева оригинальное изображение, справа измененное без длительной настройки и обучения из того, что можно увидеть на данной картинке. То, что лицо выглядит застывшим, а также взгляд направлен не на интервьюера справа, а вверх, при этом тени сохраняются также как и свет. В самом видео можно только отметить, что мимика в целом более скудная и рот не открывается достаточно, как должно быть при живой речи. Также можно отметить то, что не видно зубов и наблюдается немного заторможенная реакция [3] .

• Неестественный голос: голос может звучать роботизированно, неестественно или иметь странные артефакты.
• Отсутствие фонового шума: слишком чистый звук в обстановке, где должен быть фоновый шум.
• Несоответствие звука и видео: звук может не соответствовать визуальным элементам.

Прежде стоит отметить, что вышеперечисленные признаки следует рассматривать вместе с остальными, поскольку они могут быть вызваны проблемами технического характера, такими как: нестабильное соединение при звонке или некачественное оборудование, например: микрофон наушники и динамик.

• Ненадежный источник: проверьте репутацию источника, распространяющего видео или изображение. Если источник вызывает подозрения, возможно, контент сфабрикован.
• Неправдоподобный контент: оцените, насколько правдоподобным выглядит событие или действие на видео/изображении. Если контент противоречит известным фактам или здравому смыслу, это может быть признаком подделки.
• Поиск оригинала: попробуйте найти оригинал видео или изображения. Если он существует, сравните его с тем, которое вызывает подозрения [3].

Зачастую многие не реалистичные объекты, звуки и эффекты могут быть добавлены при помощи нейросети или видеомонтажа. Такой факт больше касается постановочных видеороликов, но автор данной статьи считает, что это стоит отметить в настоящем исследовании, поскольку при попытке определить подлинность материала потребуется время, в тот момент как данная статья определяет фокус на возможности обнаружить дипфейк без затрат времени.

• Слишком идеально: если лицо выглядит слишком гладким, без морщин или дефектов, то это может быть признаком цифровой обработки.
• Нелогичные детали: следует обратить внимание на любые детали, которые кажутся нелогичными или не соответствуют обстановке.
• “Чувство, что что-то не так”: иногда интуиция может подсказать, что перед вами подделка.

Итак, в данной статье собраны общие признаки, которые напрямую не помогут выявить дипфейк, но могут подсказать, на что нужно обратить внимание. Существует термин – «зловещая долина», которая обозначает нечто похожее на реальное, но имеющее отличия, которые незаметны на первый взгляд, к примеру, при создании изображений могут быть ошибки, когда в какой-то позе ноги или руки поменялись местами, или имеется изгиб, который не возможен, находящийся вне зоны видимости.

Вывод

Дипфейк без специального ПО можно обнаружить, однако это потребует внимания и быстрого мышления, чтобы заподозрить признаки синтеза и точно определить, что материал не является оригинальным. Также является осложняющим фактором то, что материал сам по себе может быть не качественным и содержать дефекты, поэтому на основании приведенных данных автором статьи сделан вывод, что выявление дипфейка без специального ПО человеком на месте в большинстве случаев будет маловероятным.

Список литературы:

1. Гуселетова А.А., Елизаров В.В. Институциональные аспекты развития рынка краудфандинга в России [Электронный ресурс]. – Режим доступа:  https://birskin.ru/attachments/article/1166/Гуселетова_Елизаров_статья.pdf. (дата обращения: 19.06.2025).
2. Центр компетенций в области импортозамещения в сфере ИКТ (ЦКИТС). [Электронный ресурс]. – Режим доступа:  https://cgitc.ru/upload/iblock/23f/67eesk6aig8owuk7brnrgwospccquaec.pdf (дата обращения: 19.06.2025)
3. Habr.com. [Электронный ресурс]. – Режим доступа:   https://habr.com/ru/companies/ru_mts/articles/778824/ (дата обращения: 19.06.2025)