EPIC-Kitchens — это набор видеозаписей, снятых от первого лица, где люди выполняют действия на кухне. Визуальный ряд сопровождается нарративом от актора, в котором озвучивается каждое действие. Всего данные состоят из 100 часов видеоматериала. Датасет собирали исследователи из University of Bristol и University of Catania.
Подробнее про датасет
Общая длительность видеозаписей — 100 часов. Количество кадров — 20 миллионов. 45 разных кухонь в 4 городах. 90 тысяч различных действий.
Что такое EPIC тест
EPIC датасет помогает исследовать протестировать свои модели на 6 задачах:
- Распознавание действий: содержит ли видеоклип данное действие (обучение с учителем и ограниченное использование размеченных данных при обучения);
- Детектирование действий: классификация действий на кадрах;
- Предсказание следующего действия (action anticipation);
- Покадровое извлечение описаний действий;
- Обобщение действия: распознавание действий на видеозаписях после предобучения на наборе других видеозаписей
На данный момент видеозаписи от первого лица не так активно используются в качестве данных для обучения моделей. EPIC-Kitchens призван спровоцировать исследования в области обработки и анализа видеозаписей, снятых от первого лица.
