Исследователи MIT разработали open-source пайплайн генерации реалистичных анимированных аватаров. Полученный на его выходе аватар помечается водяным знаком, чтобы отличить его от подлинного контента.
Аватары предлагается использовать в задачах улучшения образовательного контента и для сохранения конфиденциальности в разговорах без стирания невербальных сигналов.
Другие приложения могут включать аватаров, которые помогают проводить терапию, чтобы облегчить растущую нехватку специалистов в области психического здоровья и охватить примерно 44 процента американцев с проблемами психического здоровья, которые никогда не получают консультаций. Также технология может быть использована для анонимизации лиц на видео при сохранении выражений лица и эмоций, что может быть полезно для сеансов, на которых люди хотят поделиться конфиденциальной информацией, такой как информация о состоянии здоровья и травмах, или для информаторов и свидетельских показаний.
Пайплайн состоит из комбинации генеративно-состязательных нейросетей для анимирования мимики и жестов, а также для генерации голоса.
