Нейросеть превращает людей на фото в персонажей аниме

Продолжение: Вышло бесплатное приложение, которое превращает людей на фото в персонажей анимеЮжнокорейские учёные представили новую нейросеть, которая превращает фотографию с обычным человеком в кадр из аниме. Разработкой занималось исследовательское подразделение NCSoft.

Как отмечают авторы, алгоритм U-GAT-IT показывает качество, существенно превосходящее аналоги.

Кадры сравнили с другими нейросетями и, согласно вердикту 135 судей, южнокорейская система создаёт наиболее похожие изображения.

Картинка ниже показывает возможности U-GAT-IT. В первом столбце оригинал селфи, а в других — полученный результат с различными настройками.

Система построена на базе генеративных сетей. Аналогичную технологию использует, к примеру, редактор GauGAN от Nvidia, который создаёт рисунки из набросков.

Качество достигается за счёт распознавания важных элементов фотографии, вроде глаз или рта.

Найти исходный код U-GAT-IT можно на GitHub.

🤨 Доходы NVIDIA рухнули

• Черно-белое интро Fallout 4 раскрасили с помощью нейросетей — видео
• Моддер улучшил графику более 150 игр с Nintendo 64 с помощью нейросети
• Ютубер заменил главного героя «Сияния» на Джима Керри с помощью нейросети — видео