Приложение ZAO заменяет лица актеров в фильмах на лица пользователей

Zao — это бесплатное deepfake приложение, в котором пользователь  может стать частью известных кинофильмов. Пользователь загружает фотографию лица, и нейросеть заменяет лицо актера фильма на лицо пользователя. В Китае приложение стало вирусным.

Zao позволяет стать частью сотен киносцен и вырезок из телепередач. При этом на вход необходимо загрузить одну фотографию.

In case you haven't heard, #ZAO is a Chinese app which completely blew up since Friday. Best application of 'Deepfake'-style AI facial replacement I've ever seen.

Here's an example of me as DiCaprio (generated in under 8 secs from that one photo in the thumbnail) ? pic.twitter.com/1RpnJJ3wgT

— Allan Xia (@AllanXia) September 1, 2019

Bloomberg пишет, что приложение было опубликовано в пятницу. С конца недели Zao держится в топе китайского iOS App Store. На данный момент доступны сцены из Титаника. Приложение заменяет лицо Leonardo Dicaprio на пользователя в 30-секундной сцене. В среднем, видеозапись генерируется за 8 секунд. Помимо опции с одной фотографией, в приложении можно загрузить несколько снимком, чтобы повысить реалистичность генерируемого видео. В таком случае приложение потребует фотографии с разных ракурсов и в разных состояниях (например, с открытым ртом).

Zao предлагает ограниченный список киносцен. Разработчики не раскрывают детали обучения нейросети. Наиболее вероятно, что модель была отдельно обучена вставлять лица в конкретные сцены. Приложение не может наложить лицо пользователя на любой другой клип не из предложенных.

Использование данных пользователей в Zao

Политика работы с данными пользователей Zao вызвала волну негативных отзывов. Разработчиком приложения является компания Changsha Shenduronghe Network Technology. Документ, регламентирующий работу приложения, имеет пункт о свободном пользовании данными, которые были сгенерированы пользователями. Компания была вынуждена ответить на волну негатива и пообещала убрать этот пункт из пользовательского соглашения. После удаления приложения пользователем его данные также будут удалены из базы.