Передовые технологии распознавания дипфейков

Цифровой океанHi-Tech

Признаки обмана

Даже Шерлок Холмс не смог бы на глаз отличить дипфейк от реального видео. поймать машину на лжи под силу только другой машине. Список таких разработок представили в свежем отчете* Роскомнадзор и Государственный радиочастотный центр. «Цифровой океан» рассказывает о них подробнее

Текст Павел Иевлев

1Пульсация вен

  • Разработчик: Intel
  • Готовность: разработка завершена в ноябре 2022 года, но ПО пока не открыто для коммерческого использования

Детектор FakeCatcher, разработанный Intel при поддержке Бингемтонского университета (штат Нью-Йорк), выявляет дипфейки, опираясь на цветовые пульсации подкожных вен лица. Детектор фиксирует незаметные глазу изменения тона, переводит их в цветовую карту и определяет, настоящий человек на видео или подделка. Для распознавания были разработаны новые подходы к обработке результатов медицинской фотоплетизмографии — регистрации изменений, возникающих при наполнении мелких сосудов кровью в зависимости от фазы кардиоцикла. FakeCatcher был протестирован на множестве видеороликов и показал точность работы 93–97 %.

В отличие от аналогов, которые требуют загрузки полного видео для анализа, что может занять несколько часов, FakeCatcher работает в режиме реального времени. Технология делает возможным анализ видео на подделку в видеочатах, модерацию видео в соцсетях и оперативную проверку материалов для новостных площадок.

Примечательно, что разработка Intel опирается на инструментарий, доступный бесплатно всем желающим. Это система распознавания лиц OpenFace, библиотека алгоритмов машинного зрения OpenCV и популярный фреймворк для создания нейронных сетей Keras.

2Артефакты изображения

  • Разработчик: Sensity
  • Готовность: работает

Компания Sensity разработала онлайнплатформу для автоматической идентификации дипфейков. Пользователь отправляет ссылку или загружает видеофайл, а искусственный интеллект проводит анализ. Система работает хотя и не в реальном времени, но очень быстро — проверка чаще всего занимает не более секунды.

Принцип работы платформы заключается в анализе кадров изображения на основе собственной базы, которая содержит несколько миллионов изображений, определенных как «сгенерированные». Система натренирована на поиск характерных артефактов, оставляемых генеративно-состязательными нейросетями. Сравнение картинки с заведомо поддельными позволяет определить характерные для дипфейков паттерны. Поскольку сейчас именно генеративносостязательные нейросети являются основным инструментом создания дипфейков, точность работы платформы Sensity достаточна для большинства случаев.

3Сомнительные кадры

  • Разработчик: Zemana
  • Готовность: работает

Открытый проект Deepware Scanner доступен как в вебверсии, так и в виде свободного кода на GitHub, а также имеет общедоступный API (Application Programming Interface — программный интерфейс приложения), позволяющий подключать его к любым сторонним приложениям. Это позволяет разработчикам привлечь для доработки инструмента максимальное количество участников.

Deepware Scanner представляет собой сверточную нейронную сеть (специальная нейросетевая архитектура, нацеленная на распознавание образов), основанную на классификаторе изображений Effi cientNet B7. Его особенность — низкая стоимость обучения моделей и простой процесс масштабирования, что позволило сделать проект свободным.

Для обучения нейросети Deepware Scanner использовался открытый датасет ImageNet, содержащий более 14 млн аннотированных изображений, и датасет Facebook (соцсеть признана в РФ экстремистской и запрещена) DFDC (Deepfake Detection Challenge), состоящий из 120 тыс. видео.

Алгоритм работы системы покадровый, скорость — один кадр в секунду, так что использовать ее в реальном времени не получится, однако для выявления дипфейков это необязательное требование. Нейросеть анализирует кадр, определяет зону, содержащую лицо человека, очищает ее от шума, затем производит оценку вероятности, что лицо сгенерировано. На выходе пользователь получает кадры, подтверждающие наличие дипфейка, а также оценочную степень уверенности нейросети.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Сканер души Сканер души

ИИ определяет личные качества людей по фотографии

Цифровой океан
«Отель «Ройал»: новое исследование харассмента от режиссера фильма о деле Вайнштейна «Отель «Ройал»: новое исследование харассмента от режиссера фильма о деле Вайнштейна

Как «Отель «Ройал» исследует тему харассмента в дальнем регионе Австралии

Forbes
Время ацтеков Время ацтеков

Что зашифровали ацтеки

Вокруг света
«Откуда берутся дети? Краткий путеводитель по переходу из лагеря чайлдфри к тихим радостям семейственности» «Откуда берутся дети? Краткий путеводитель по переходу из лагеря чайлдфри к тихим радостям семейственности»

Как во время беременности работает иммунитет

N+1
Тотальный фейсконтроль Тотальный фейсконтроль

Роботы никогда не скажут, что все люди на одно лицо

Цифровой океан
Улицы волшебных фонарей Улицы волшебных фонарей

«Волшебный участок»: милицейская сказка

Weekend
10 наиболее частых вопросов о внедорожниках 10 наиболее частых вопросов о внедорожниках

Чем внедорожник отличается от кроссовера?

4x4 Club
Оказалось, что «кошачий» паразит делает пожилых людей слабее Оказалось, что «кошачий» паразит делает пожилых людей слабее

Кошачьи могут представлять серьезную опасность для пожилых людей

ТехИнсайдер
Установлена лазерная связь на расстоянии 16 миллионов километров. Это в 40 раз дальше Луны Установлена лазерная связь на расстоянии 16 миллионов километров. Это в 40 раз дальше Луны

Самая дальняя в истории демонстрация оптической связи

ТехИнсайдер
Исчерпывающий гид по презервативам: 12 видов, их плюсы и минусы Исчерпывающий гид по презервативам: 12 видов, их плюсы и минусы

Какие виды кондомов существуют на сегодняшний день?

VOICE
Викинг в мохнатых штанах Викинг в мохнатых штанах

Рагнар Лодброк — легендарный датский конунг

Дилетант
Облигации станут лесопарком Облигации станут лесопарком

Как банки расширяют практики устойчивого развития

Деньги
Вечно беременные: 7 мотивов, почему некоторые женщины хотят быть многодетными Вечно беременные: 7 мотивов, почему некоторые женщины хотят быть многодетными

Чем руководствуются женщины, выбирая большую семью?

Psychologies
Как сделать так, чтобы борода росла быстрее Как сделать так, чтобы борода росла быстрее

Главный минус бороды в том, что она не может вырасти за один день

Maxim
Про отцов и для отцов: 5 книг, которые помогут разобраться в детско-родительских отношениях Про отцов и для отцов: 5 книг, которые помогут разобраться в детско-родительских отношениях

Хотите узнать о роли отца в культурной традиции и вашей собственной жизни?

Psychologies
Через апокалипсис революции к тысячелетнему царству Через апокалипсис революции к тысячелетнему царству

Как возникла коммунистическая утопия

Weekend
«Главное — это вера и огромное терпение» «Главное — это вера и огромное терпение»

Диана Мирошникова рассказала о воспитании музыкой и знаковых встречах

OK!
Поупражнялись в girl math и съели girl dinner: как «девчачий ужин» и «девчачья математика» стали мемами Поупражнялись в girl math и съели girl dinner: как «девчачий ужин» и «девчачья математика» стали мемами

Что за тренд с girl/boy появился в сети и так ли он безобиден, как кажется

Правила жизни
«Книги редко становятся бестселлерами просто так — приходится похлопотать»: как они попадают в списки The New York Times «Книги редко становятся бестселлерами просто так — приходится похлопотать»: как они попадают в списки The New York Times

Как писатели получают места в рейтинге бестселлеров от NYT

VC.RU
«Было или не было?»: почему мы скучаем по времени, в котором никогда не жили «Было или не было?»: почему мы скучаем по времени, в котором никогда не жили

Фильмы, фотографии и книги могут вызывать у вас чувство ностальгии

ТехИнсайдер
Основные принципы езды по снегу и льду Основные принципы езды по снегу и льду

Зимний офф-роуд — традиционная российская забава

4x4 Club
Сила в неправде: как и зачем нас дезинформируют Сила в неправде: как и зачем нас дезинформируют

Глава из книги «Новое Просвещение и борьба за свободу знания» Питера Кауфмана

Inc.
Пришло время платить Пришло время платить

Какие налоги надо платить и как проверить, есть ли долги

Лиза
Равновесие сил Равновесие сил

Свет и Тьма как две основы мироздания

Вокруг света
Как практиковать медитацию в повседневной жизни: 8 правил Как практиковать медитацию в повседневной жизни: 8 правил

Пользоваться внутренними ресурсами для самоисцеления проще, чем кажется

Psychologies
Недорогие старые препараты предотвратили мигрень не хуже дорогих новых Недорогие старые препараты предотвратили мигрень не хуже дорогих новых

Ученые сравнили эффективность препаратов для профилактики приступов мигрени

N+1
«Любовь и голуби» глазами психолога: когда измена идет на пользу «Любовь и голуби» глазами психолога: когда измена идет на пользу

Оказывается, иногда интрижка даже укрепляет отношения

Psychologies
Быстрее, выше, сильнее: как связаны спорт и либидо Быстрее, выше, сильнее: как связаны спорт и либидо

Можно ли повысить либидо, занимаясь спортом?

Правила жизни
Актуальная архаика Актуальная архаика

Маяна Насыбуллова: слепки с реальности

Weekend
Гусары, молчать: почему фильм «Наполеон» Ридли Скотта оказался неточным и однобоким Гусары, молчать: почему фильм «Наполеон» Ридли Скотта оказался неточным и однобоким

Почему в «Наполеоне» исторические процессы сводят к интимной жизни императора?

Forbes
Открыть в приложении