Шедеврум Yandex’а научился создавать видео по запросу юзеров
Yandex первым на русском рынке запустил технологию сотворения видео при помощи нейросети для юзеров. Приложение Шедеврум научилось генерировать ролики в ответ на текстовые запросы. Эти видео можно применять для сотворения клипов, анимации, динамических аватарок.

Шедеврум научился создавать недлинные видеоролики длиной четыре секунды с частотой 24 кадра за секунду. Результатом можно поделиться с друзьями либо сохранить в формате MP4.
Пока функция работает в тестовом режиме. Генерация видео доступна в освеженной версии приложения активным юзерам. Поглядеть результаты в ленте могут все.
Чтоб Шедеврум сделал видео, необходимо обрисовать текстом то, что охото узреть. В ответ приложение предложит четыре варианта первого кадра и набор анимированных эффектов. Нейросеть берет за базу выбранное юзером изображение, генерирует набор его модифицированных версий и соединяет воединыжды все избранным эффектом. На данный момент их семь: зум (приближение), таймлапс (ускоренная перемотка), полет, панорама, вращение, подъем и морфинг (постепенное изменение).
Для сотворения кадров грядущего ролика сервис употребляет способ каскадной диффузии. Поначалу нейросеть делает рисунки в согласовании с запросом, а потом поэтапно наращивает их разрешение, насыщая деталями.
Генерация видео дополняет остальные способности Шедеврума – создание изображений и текстовых постов с заголовком и иллюстрацией.
Напомним, Yandex представил Шедеврум в апреле 2023 года. Сходу опосля пуска приложение попало на 1-ые строки русских топов App Store и Гугл Play, и с того времени его установили наиболее 5,8 миллиона юзеров iOS и Android.