В США представили новый инструмент, который может определять дипфейки по отражениям в глазах с точностью до 94%. Но он срабатывает не во всех случаях. Новый инструмент на основе ИИ предлагает простой способ обнаружения дипфейков: инструмент обрабатывает свет, отраженный в глазах и определяет естественный он или нет.

Систему создали ученые из Университета в Баффало в США. В тестах на портретных фотографиях, инструмент был эффективен на 94%.

Система определяет подделки с помощью анализа роговицы, поверхность которой отражает поверхность перед героем видео. На снимке лица, сделанном камерой, отражение в обоих глазах будет похожим, потому что они видят одно и то же. Но отражения на дипфейк-видео или изображениях зачастую отличаются.

Система генерирует оценку, которая служит метрикой сходства. Чем меньше балл, тем больше вероятность того, что лицо является дипфейком. Система показала высокую эффективность при обнаружении подделок, взятых из стоков, созданных в архитектуре StyleGAN2. Однако авторы исследования признают, что она имеет несколько ограничений.

Самым очевидным недостатком инструмента является то, что он полагается на отраженный источник света в обоих глазах. Несоответствия в этих шаблонах можно исправить с помощью ручной постобработки, и если один глаз не виден на изображении, метод не будет работать.

Он также доказал свою эффективность только на портретных изображениях. Если лицо на изображении не смотрит на камеру, система, скорее всего, выдаст ложные срабатывания.