fbpx
  • DFDC: соревнование по распознаванию deepfake

    Deepfake Detection Challenge (DFDC) — это соревнование по распознаванию deepfake на видеозаписях. Дата начала соревнования назначена на декабрь. Частично датасет доступен публично. Публикация полного датасета пройдет на конференции Neural Information Processing system (NeurIPS) в декабре. Партнерами соревнования являются Facebook, Microsoft и AWS. 

    В связи с появлением новых способ распространения ложной информации необходимо уметь распознавать действительную информацию от недействительной. С помощью генеративных нейросетей на текущий момент производят фотореалистичные видеозаписи, на которых может отобразить что угодно. На данный момент задача классификации фейковых видео не решена полностью. Это сподвигло исследователей из Facebook на организацию соревнования по распознаванию deepfake.

    Что внутри датасета

    DFDC датасет состоит из 5 тысяч видео с двумя алгоритмами для модификации лиц. Процесс сбора данных состоял из этапа сбора видеозаписей реальных актеров и последующая модификация этих видеозаписей для генерации deepfake. Исследователи обеспечили разнообразие типов внешности добровольцев: оттенок кожи, пол, возраст и другие внешние характеристики. Актеры записывали видео с любым задним фоном, что также обеспечивает разнообразие данных.

    Существующие решения

    Затем исследователи отобрали метрики для оценки качества моделей. Организаторы соревнования протестировали две существующие модели по распознаванию фейков. TamperNet и XceptionNet выдают предсказания с точностью от 78% до 93% в зависимости от формулировки задачи. Существующие модели используются как базовые модели в соревновании. Начальная версия датасета доступна по ссылке.