Яндекс представляет YandexART (Vi): новая нейросеть для генерации видео

Компания Яндекс анонсировала запуск бета-версии своей передовой нейронной сети YandexART (Vi), способной генерировать реалистичные 5-секундные видеоролики.

Эта модель впечатляет своей способностью воспроизводить плавные и натуралистичные движения объектов – от бегущих животных до падающих листьев и ярких фейерверков.

YandexART (Vi) доступна широкой аудитории – от обычных пользователей до профессиональных дизайнеров и создателей контента. Нейросеть интегрирована в приложение Шедеврум, что делает её простой и удобной в использовании для всех желающих попробовать свои силы в видеотворчестве.

Первая версия YandexART, представленная в 2023 году, позволяла создавать анимации с эффектом движущейся камеры. Новая версия (Vi) сфокусирована на более сложных и реалистичных движениях объектов. Одним из ключевых улучшений стало устранение резких переходов между кадрами – YandexART (Vi) учитывает взаимосвязь между ними, придавая видео целостность и живость.

Нейросеть обучалась на обширной базе видеозаписей с активно движущимися объектами, таких как автомобили и животные. Это позволило добиться высокой плавности анимации. Процесс создания видео начинается с генерации изображения по текстовому описанию, после чего пользователь может оценить предварительный результат. Если всё устраивает, YandexART (Vi) преобразует цифровой шум в последовательные кадры на основе превью и текстового запроса.

Хотя YandexART (Vi) пока уступает возможностям лидеров отрасли, таких как Gen 3 или Sora, она представляет собой многообещающую альтернативу, активно развивающуюся и совершенствующуюся.