Нейросеть превращает людей на фото в персонажей аниме

Южнокорейские учёные представили новую нейросеть, которая превращает фотографию с обычным человеком в кадр из аниме. Разработкой занималось исследовательское подразделение NCSoft.

Как отмечают авторы, алгоритм U-GAT-IT показывает качество, существенно превосходящее аналоги.

Кадры сравнили с другими нейросетями и, согласно вердикту 135 судей, южнокорейская система создаёт наиболее похожие изображения.

Картинка ниже показывает возможности U-GAT-IT. В первом столбце оригинал селфи, а в других — полученный результат с различными настройками.

Система построена на базе генеративных сетей. Аналогичную технологию использует, к примеру, редактор GauGAN от Nvidia, который создаёт рисунки из набросков.

Качество достигается за счёт распознавания важных элементов фотографии, вроде глаз или рта.

Найти исходный код U-GAT-IT можно на GitHub.