Исследователи из Huawei Hisilicon предлагают новый метод для генерации скетча на основе изображения. Предложенная модель не только генерирует изображение скетча, но и восстанавливает сам процесс отрисовки. Модель обходит предыдущие подходы по качеству текстуры, стилю и оценке пользователей.
В чем проблема
Существующие алгоритмы для карандашных скетчей базируются на рендеринге текстуры, а не на прямой имитации штрихов. Это ограничивает возможность таких подходов восстанавливать процесс рисования. Чтобы обойти это ограничение, исследователи определяют механизм имитации штриха карандаша. Затем они разработали фреймворк для рисования штрихами.
Подробнее про подход
Подход состоит из трех частей:
- Первая часть задает направление штрихов;
- Вторая часть определяет тень от штрихов;
- Третья часть уточняет детали рисунка
С помощью фреймворка можно генерировать карандашный скетч, где на каждый момент времени будет рисоваться один штрих. Преимущество модели заключается в ее интерпретируемости.
Код проекта доступен в открытом репозитории на GitHub.