Алгоритм узнал настоящее фото по равным зрачками глаза

Нужно заглянуть в глаза и определиться: насколько ровные контуры зрачка глаза лица на фото. Модель проверяет, есть ли зрачки круглыми. И если они имеют более ровную форму, то фото можно считать настоящим, сообщают авторы исследования. Генеративные соревновательные сети (GAN) умеют создавать реалистичные изображения человеческих лиц, как следует из названия, соревнуясь между собой. И их действительно сложно отличить от настоящих фото, поэтому нет никакой проблемы разместить такой снимок в социальных сетях и способствовать распространению deepfake. Некоторые порталы, такие как Twitter и Gfycat, объявили об удалении deepfake-контента и блокирования его издателей. Поэтому исследователи искусственного интеллекта ищут способы учить одни нейросети различать продукты, созданные другими, чтобы помогать нам сосуществовать в цифровом пространстве.

Обычно такие методы основаны на поисках несоответствий моделей синтеза GAN с тем, какими должны быть реальные лица. Например, равенство зрачка глаза. На них кстати часто и настраиваются подобные нейросети, которые ищут ошибки других — например, несогласованностью зеркальных бликов роговицы между двумя синтезированными глазами. Однако, при плохих настроек фото, источников света и условий окружающей среды, а чаще всего не соблюдение портретных настроек, метод вызовет много ложных срабатываний.

Чтобы устранить эти ограничения и создать более надежную модель, в этой работе исследователи Университета Олбани в Нью-Йорке предложили более физиологический метод, основанный на форме зрачка. Так у здоровых взрослых зрачки имеют форму, близкую к круглой, а вот в сгенерированных она неровная и эллиптическая. Это связано с тем, что хоть GAN и хорошо справляются со своими задачами, тренируя друг друга в создании человеческих лиц, они не учатся друг у друга.

Так сначала их нейросеть определяет на фото лицо, затем ищет глаза как ориентир и ограничивает их. Так хорошие исследователи не исключают, что нейросеть ошибется, если на фото у человека с формой зрачков заболевания, системе оценивания, просто подаст сигнал, фото нуждается в проверке.

Перевод материала nauka.ua