Сбер на конференции AI Journey 2023 представил обновлённую версию нейросеть Kandinsky 3.0 и добавил функции создания видео и анимации по текстовому описанию (промту).
Инструменты генерации умеют создавать видеоролики длительностью 8 секунд с максимальным разрешением 512×512 пикселей. Далее рассказываем, как получить доступ к новой функции и как создавать видео в нейросети Kandinsky 3.0.
Читайте также: Как сделать видео в Шедевруме
Как сделать видео в Кандинском
Согласно Сберу, нейросеть обучалась на базе данных, содержащей 300 000 пар «текст-видео». Для генерации короткого ролика требуется до трех минут. Ролики имеют разрешение 512×512 пикселей, частоту кадров 30 к/с и длительностью 8 секунд по текстовому описанию.
Сервис использует новейшую модель Kandinsky 3.0, которая производит генерацию сотен кадров, а затем соединяет их в плавную анимацию. ИИ-видео отличаются от обычных анимаций тем, что в них движется не только камера, но и объекты и фон. Это создает ощущение непрерывности и реалистичности сцены.
Генерация видео. Чтобы использовать нейросеть Kandinsky Video перейдите на сайт fusionbrain.ai и пройдите регистрацию. Далее откройте вкладку «Видео», выберите «Модель — Видео» и поставьте нужный размер.
Следующий шаг — составьте наиболее подробное описание видео, которое вы хотите в итоге получить. Добавьте описание в текстовое поле внизу и нажмите кнопку «Создать видео».
Генерация обычно занимает 3-4 минуты, по завершению которой вы увидите готовый ролик и сможете его скачать, нажав соответствующую кнопку в правом верхнем углу.
Создание анимации. Kandinsky 3.0 также позволяет создавать покадровую анимацию. Для этого переключаем на модель «Анимация» и выбираем нужный размер.
После этого настраиваем сцены, для каждой из них прописываем текстовое описание и указываем направление камеры (движения в кадре).
Для добавления сцены нажимаем на соответствующую кнопку справа. Длительность сцены 4 секунды. Учитывайте, что чем больше сцен в вашей анимации, тем дольше она будет генерироваться.
В завершении ждём «Создать анимацию» и скачиваем полученный результат.
Таким образом, Kandinsky Video представляет собой очень простой инструмент для создания действительно качественных анимаций. Что касается видео, то скорее лучше подойдёт формулировка «живые фото», потому что в итоге генерируется не ролик из разных сцен, а собирается множество фото, которые просто сменяют друг друга.
Ранее нейросеть Runway объявила, что в ближайшее время в инструменте создания видео Gen-2 появится функция — Motion Brush.
