Яндекс представил новую нейросеть YandexART (Vi) для создания коротких видео. Как сообщили в компании, модель способна генерировать пятисекундные ролики с плавными движениями объектов, таких как бегущая собака или падающий лист.
YandexART (Vi) доступна в приложении «Шедеврум» и предназначена как для обычных пользователей, так и для специалистов — блогеров и мультипликаторов. С её помощью можно создать уникальные анимации, например, заставки для телефона.
По сравнению с предыдущей версией, представленную в прошлом году, YandexART (Vi) научилась воссоздавать реалистичные движения и связи между кадрами, что делает видео более цельным. Модель обучена на роликах с движущимися объектами и генерирует анимацию, преобразуя текстовый запрос в последовательность кадров.
Пользователь вводит описание, например: «Брейк-данс верблюда в солнечной пустыне», и YandexART (Vi) создаёт изображение, которое затем превращается в плавное видео.