Нейросеть «Яндекса» научилась создавать плавные видео

«Яндекс» выпустил новую версию нейросети YandexART, научив ее создавать пятисекундные видео. Модель находится на стадии бета-тестирования и доступна для всех пользователей.

Предыдущая версия модели, которую представили в августе прошлого года, тоже умела снимать видео, однако они напоминали набор склеенных между собой картинок. Теперь YandexART может воссоздавать плавные движения объектов вроде падающих листьев или крадущейся кошки. Кроме того, нейросеть научилась понимать связь между кадрами, поэтому ролики стали более цельными.

YandexART — это диффузионная нейросеть, которую обучали на 330 миллионах картинок. В случае с роликами она генерирует арт по описанию пользователя, а затем превращает цифровой шум в последовательность кадров.

Опробовать нейросеть можно в приложении «Шедеврум».