Luma AI – нейросеть, способная создавать короткие видео на основе изображений и текстовых описаний. С ее помощью можно «оживлять» фото, делать ролики из мемов, генерировать 3D-модели и сцены для фильмов, игр и презентаций. Пригодна для использования в кинематографии, архитектуре, гейм-индустрии и сфере дизайна.
В статье рассмотрим возможности, особенности и тарифы Luma AI. Разберемся, как пользоваться сервисом бесплатно.
Читайте также: 5 нейросетей для обработки фото
Что умеет нейросеть Luma AI
Dream Machine – генератор видео на базе искусственного интеллекта, запущенный компанией Luma Labs 12 июня 2024.
Возможности нейросети Luma AI:
- «Оживление» статичных изображений – анимация фотографий и рисунков, добавление персонажам мимики и движения.
- Генерирование ролика по ключевым кадрам – преобразование одного изображения в другое, дорисовка промежуточных кадров (морфинг), с учетом заданных условий.
- Создание видео с нуля по текстовому описанию.
Пример использования нейросети: оживление мемов
И ещё один оживший мем:
Нейросеть генерирует 5-секундный ролик с частотой 24 кадра в секунду (120 кадров анимации в общей сложности). При желании видео можно расширить – увеличить его продолжительность еще на 5 секунд (опция Extend).
Изображения следует загружать в формате JPG или PNG, а текстовые запросы вводить – на английском языке. Самый качественный результат получается, если на изображении один объект, расположенный посередине.
Есть опция для автоматического расширения и детализации запроса (кнопка «Enhance prompt»). Увидеть, как изменится запрос, не получится – результат будет виден только после генерации видео. Если полученный результат не устроил, нужно отключить опцию и повторить генерацию.
Если кнопка улучшения не используется, подсказку нужно писать более подробно. Чтобы видео выглядело максимально реалистично и имитировало съемку, следует указывать движение камеры.
Статья в тему: 5 нейросетей для генерации видео
Как оживить фото с помощью Luma AI
Откройте официальный сайт lumalabs.ai и нажмите на кнопку «Try New» («Попробовать Новое»). Также есть мобильные приложения для iOS и Android.
Авторизуйтесь при помощи Google-аккаунта.
Шаг 1. Чтобы начать генерировать видео, нажмите на кнопку Greate. Кликните по значку в левой части текстового поля и загрузите изображение, которое хотите «оживить».
Миниатюра загруженной картинки отобразится над полем слева. При необходимости вы можете добавить еще одну картинку, если хотите, чтобы нейросеть сгенерировала плавный переход между ними, и ввести текстовое уточнение по будущей анимации. Затем нажмите по кнопке запуска генерации – белая стрелка в правой части текстового поля.
Процесс генерации 5-секундного видео по времени занимает около 2 минут.
Шаг 2. Созданное видео вы увидите в нижней части окна. Под ним располагаются кнопки Extend (расширить) и Dowloand (скачать), а также палец вверх / вниз – для оценки качества видео. Первая кнопка позволяет увеличить продолжительность видео еще на 5 секунд, вторая – скачать его на компьютер в формате mp4. Ниже отображается, сколько минут / часов назад было создано видео.
Чтобы просмотреть результат, наведите курсор на картинку.
Шаг 3. Для расширения видео нажмите на соответствующую кнопку и воспользуйтесь подсказкой.
Текстовое уточнение следует вводить на английском языке, русский язык нейросеть не понимает. Возьмем, к примеру, текст: «Кот и собака поворачивают друг к другу мордочки и касаются носами». Переводим: «The cat and the dog turn their muzzles to each other and touch their noses», вставляем и запускаем генерацию.
Расширенное 10-секундное видео появится рядом с 5-секундным.
Наводим на него курсор и смотрим результат:
Его можно расширить еще на 5 секунд с вводом уточняющего промта.
Как создать видео по текстовому описанию
Для генерации видео по текстовому описанию, создайте промт на английском, введите его в текстовое поле, нажмите на кнопку генерации.
В качестве примера используем текст: «На поляне растут красные, желтые и синие цветы. Яркое солнце освещает поляну, легкий ветер колышет растения. Котята играют и бегают друг за другом по поляне».
Созданное видео появится в списке ниже. Его также можно расширять с использованием уточняющего текста, скачивать на компьютер и оценивать.
Сколько стоит Luma AI
Ознакомиться с тарифами сервиса вы можете в личном кабинете, кликнув по пункту Account.
Нейросетью можно пользоваться бесплатно, но с ограничением на количество генераций, качество полученных видео и приоритет в очереди.
Тарифы:
- Free (бесплатно) – 30 генераций, обычный приоритет.
- Lite (9,99 долларов / мес.) – 70 генераций, высокий приоритет.
- Standart (29,99 долларов / мес.) – 150 генераций, высокий приоритет.
- Plus (64,99 долларов / мес.) – 310 генераций, высший приоритет.
- Pro (99,99 долларов / мес.) – 480 генераций, высший приоритет.
- Premier (499,99 долларов / мес.) – 2 430 генераций, высший приоритет.
При оформлении годовой подписки предоставляется скидка 20%.
Free и Lite предназначены для некоммерческого использования. На видео отображается водяной знак.
Чтобы удалить водяной знак и получить право на использование сгенерированных видео в коммерческих целях, нужно приобрести подписку не ниже Standart. Оплата с российских карт не принимается. Чтобы перейти на платный тариф, придется воспользоваться картой иностранного банка.
Заключение
Luma AI является мощным инструментом для создания видеоконтента по картинкам и текстовым промтам. Нейросеть способна автоматически расширять введенные запросы, оживлять статичные изображения и генерировать на их основе 3D сцены, с реалистичной имитацией мимики и движения персонажей. С ее помощью можно делать креативы для таргета и соцсетей, создавать контент для игр, фильмов и приложений с виртуальной и дополненной реальностью.
Больше гайдов по нейросетям:
