Нейросеть «Яндекса» начала генерировать видео в «Шедевруме»
«Яндекс» представил технологию создания видео с помощью нейросети дляпользователей. Такая возможность появилась в «Шедевруме». В ответ на запросыприложение генерирует короткие ролики, рассказали в пресс-службекомпании.
«Шедеврум» генерирует видео длиной в четыре секунды с частотой 24 кадра всекунду. После публикации ими можно поделиться с друзьями или сохранить вформате MP4. Сейчас функция работает в режиме тестирования. Генерация видеодоступна активным пользователям «Шедеврума» в обновленной версии приложения, апосмотреть результаты в ленте приложения могут все.
Чтобы сгенерировать видео в «Шедевруме», необходимо описать текстом то, чтохочется увидеть. В ответ приложение предложит четыре варианта первого кадра инабор анимационных эффектов для создания движения. Нейросеть берет за основувыбранное пользователем изображение, генерирует набор его измененных версий иобъединяет все выбранным эффектом. Сейчас их семь: зум (приближение), таймлапс(ускоренная перемотка), полет, панорама, вращение, подъем и морфинг(постепенное изменение).
Для создания кадров будущего видео используется метод каскадной диффузии. Спомощью этой технологии «Шедеврум» генерирует отдельные изображения. Сначаланейросеть создает картинки в соответствии с запросом, а затем поэтапноувеличивает их разрешение, добавляя детали. Нейросеть также может создаватьизображения и текстовые посты с заголовками и иллюстрациями.
«Яндекс» представил прототип собственной нейросети «Шедеврум» вапреле 2023 г. Позже эта технологияначала иллюстрировать рекламу.
Источник: ria novosti