SYNTX AI

📽 LUMA Dream Machine

10 min read

@syntxaibot | June 28, 2024

Luma: Dream Machine - это модель для генерации видео. Нейросеть позволяет создавать высококачественные, реалистичные видеоролики на основе текстового описания или изображения.

Модель отлично справляется с передачей движения, динамики сцены, освещения и атмосферы, что делает её подходящей как для креативных задач, так и для коммерческого контента.

Инструмент доступен для тарифов PRO и выше.

⚡️В нашем чат боте Luma:DM рассматривает запросы, поступающие на всех языках, независимо от того, что основным языком является английский.

❗️Максимальное количество символов в запросе — 1000 символов.

🎛 Навигация:

🏠 Главное меню > 🎬 Видео будущего > 📽️ Luma: Dream Machine

💥Пошаговое руководство по использованию LUMA «Текст в видео»

Первым делом при работе по текстовому запросу, вам необходимо корректно проставить настройки для будущей генерации.

Настройки модели

Продолжительность

У вас есть возможность выбрать продолжительность для будущей генерации 5 или 10 секунд.

❣️ При работе в модели Ray 3 Reasoning доступная продолжительность только 5 секунд.

Модель

Ray 2 - Универсальная модель для генерации качественных и реалистичных видео. Обеспечивает хорошую детализацию, стабильные сцены и гибкие настройки. Подходит для большинства задач и повседневного видеоконтента.

Ray 2 Flash - Ускоренная и более доступная версия Ray 2. Генерация происходит значительно быстрее и дешевле, но с упрощённым качеством по сравнению с флагманской моделью. Идеальна для быстрых проектов и тестовых генераций.

Ray 3 - Флагманская модель с улучшенной анатомией персонажей, повышенной стабильностью сцен и поддержкой студийного HDR. Поддерживает режимы SDR, HDR и HDR+EXR.

Ray 3 Reasoning - Продвинутая версия Ray 3 с логическим пониманием сцены. Модель лучше интерпретирует сложные запросы, сохраняет стиль, композицию и замысел автора даже в многоэлементных сценах. Подходит для сложных, кинематографичных проектов.

Качество

У вас есть возможность выбрать качество для будущей генерации: 720р или 1080р.

Зацикливание/Dynamic

При работе в моделях Ray 2 и Ray 2 Flash у вас есть возможность выбрать настройку «зацикливания». Вы можете либо выключить, либо включить её, чтобы ваша будущая генерация имела эффект зацикленного видео.

При работе в моделях Ray 3 и Ray 3 Reasoning у вас есть возможность выбрать динамический диапазон.

SDR - Стандартный динамический диапазон. Обеспечивает стабильное и корректное отображение видео на всех устройствах. Подходит для большинства задач и публикаций в соцсетях.

HDR - Расширенный динамический диапазон с повышенной яркостью и контрастом. Позволяет получить более насыщенное и детализированное изображение, требует поддержки HDR на устройстве просмотра.

HDR+EXR - Продвинутый режим с максимальным динамическим диапазоном и повышенной детализацией в светлых и тёмных областях. Подходит для профессиональных задач и пост-обработки, может требовать дополнительной цветокоррекции и совместимых устройств.

Соотношение сторон

У вас есть возможность выбрать одно из 6 предложенных соотношений сторон.

После выставления всех настроек, нажмите кнопку «Сохранить и закрыть». Далее необходимо перейти к составлению текстового запроса.

Создание текстового запроса

Залог успешной генерации - это структурированный запрос, который помогает модели корректно понять вашу идею.

В текстовом запросе необходимо указать главный объект и его действие, пространство и время суток, стиль и настроение, а также движение камеры - при необходимости.

Например:

«Рыжий котёнок играет с лучом солнца, пытаясь поймать его лапками. Действие происходит в уютной комнате у окна, утро, мягкий естественный свет заполняет пространство. Стиль - кинематографичный, реалистичный, с тёплой цветовой палитрой. Настроение - спокойствие, нежность, ощущение беззаботного момента».

Результат:

Luma Ray 2:

Luma Ray 2 Flash:

Luma Ray 3:

Luma Ray 3 Reasoning:

💥 Пошаговое руководство по использованию «Картинка в видео»

При работе с референсом, первым делом вам необходимо проставить настройки модели.

Настройки модели

Продолжительность

При работе с изображением, длительность будет фиксированной – 5 секунд. Даже если вы выберите в настройках продолжительность 10 секунд, инструмент сгенерирует только 5.

Модель

Ray 2 - Универсальная модель для генерации качественных и реалистичных видео. Обеспечивает хорошую детализацию, стабильные сцены и гибкие настройки. Подходит для большинства задач и повседневного видеоконтента.

Ray 2 Flash - Ускоренная и более доступная версия Ray 2. Генерация происходит значительно быстрее и дешевле, но с упрощённым качеством по сравнению с флагманской моделью. Идеальна для быстрых проектов и тестовых генераций.

Ray 3 - Флагманская модель с улучшенной анатомией персонажей, повышенной стабильностью сцен и поддержкой студийного HDR. Поддерживает режимы SDR, HDR и HDR+EXR.

Ray 3 Reasoning - Продвинутая версия Ray 3 с логическим пониманием сцены. Модель лучше интерпретирует сложные запросы, сохраняет стиль, композицию и замысел автора даже в многоэлементных сценах. Подходит для сложных, кинематографичных проектов.

Качество

У вас есть возможность выбрать качество для будущей генерации: 720р или 1080р.

Зацикливание/Dynamic

При работе в моделях Ray 2 и Ray 2 Flash у вас есть возможность выбрать настройку «зацикливания». Вы можете либо выключить, либо включить её, чтобы ваша будущая генерация имела эффект зацикленного видео.

При работе в моделях Ray 3 и Ray 3 Reasoning у вас есть возможность выбрать динамический диапазон.

SDR - Стандартный динамический диапазон. Обеспечивает стабильное и корректное отображение видео на всех устройствах. Подходит для большинства задач и публикаций в соцсетях.

HDR - Расширенный динамический диапазон с повышенной яркостью и контрастом. Позволяет получить более насыщенное и детализированное изображение, требует поддержки HDR на устройстве просмотра.

HDR+EXR - Продвинутый режим с максимальным динамическим диапазоном и повышенной детализацией в светлых и тёмных областях. Подходит для профессиональных задач и пост-обработки, может требовать дополнительной цветокоррекции и совместимых устройств.

Соотношение сторон

У вас есть возможность выбрать одно из 6 предложенных соотношений сторон.

После выставления всех настроек, нажмите кнопку «Сохранить и закрыть». Далее необходимо перейти к загрузке изображения.

Загрузка изображения

Технические требования к изображению:

  • Вы можете добавлять изображения в формате JPEG, PNG и HEIC.
  • Максимальный вес файла - 10 MB.
  • При использовании одного изображения оно используется в качестве первого кадра.

Например:

После загрузки референса вам необходимо прописать текстовой запрос, чтобы задать движение вашему изображению.

Создание текстового запроса

Залог успешной генерации - это структурированный запрос, который помогает модели корректно понять вашу идею.

В текстовом запросе необходимо указать главный объект и его действие, пространство и время суток, стиль и настроение, а также движение камеры - при необходимости.

❣️ Вы можете не указывать текстовый запрос, если желаете доверить работу нейросети. В таком случае нейросеть самостоятельно подберет движения под загруженное изображение.

Например:

«Камера плавно отъезжает назад, на поверхности воды постепенно появляются и раскрываются цветы».

После загрузки изображения и ввода текстового запроса, нажмите кнопку «Сгенерировать», чтобы запустить процесс генерации.

Результат:

LUMA Ray 2:

LUMA Ray 2 Flash:

LUMA Ray 3:

LUMA Ray 3 Reasoning:

💥 Пошаговое руководство по использованию LUMA «2 Картинки в видео»

При работе с двумя референсами, первым делом вам необходимо проставить настройки модели.

Настройки модели

Продолжительность

При работе с изображениями, длительность будет фиксированной – 5 секунд. Даже если вы выберите в настройках продолжительность 10 секунд, инструмент сгенерирует только 5.

Модель

Ray 2 - Универсальная модель для генерации качественных и реалистичных видео. Обеспечивает хорошую детализацию, стабильные сцены и гибкие настройки. Подходит для большинства задач и повседневного видеоконтента.

Ray 2 Flash - Ускоренная и более доступная версия Ray 2. Генерация происходит значительно быстрее и дешевле, но с упрощённым качеством по сравнению с флагманской моделью. Идеальна для быстрых проектов и тестовых генераций.

Ray 3 - Флагманская модель с улучшенной анатомией персонажей, повышенной стабильностью сцен и поддержкой студийного HDR. Поддерживает режимы SDR, HDR и HDR+EXR.

Ray 3 Reasoning - Продвинутая версия Ray 3 с логическим пониманием сцены. Модель лучше интерпретирует сложные запросы, сохраняет стиль, композицию и замысел автора даже в многоэлементных сценах. Подходит для сложных, кинематографичных проектов.

Качество

У вас есть возможность выбрать качество для будущей генерации: 720р или 1080р.

Зацикливание/Dynamic

При работе в моделях Ray 2 и Ray 2 Flash у вас есть возможность выбрать настройку «зацикливания». Вы можете либо выключить, либо включить её, чтобы ваша будущая генерация имела эффект зацикленного видео.

При работе в моделях Ray 3 и Ray 3 Reasoning у вас есть возможность выбрать динамический диапазон.

SDR - Стандартный динамический диапазон. Обеспечивает стабильное и корректное отображение видео на всех устройствах. Подходит для большинства задач и публикаций в соцсетях.

HDR - Расширенный динамический диапазон с повышенной яркостью и контрастом. Позволяет получить более насыщенное и детализированное изображение, требует поддержки HDR на устройстве просмотра.

HDR+EXR - Продвинутый режим с максимальным динамическим диапазоном и повышенной детализацией в светлых и тёмных областях. Подходит для профессиональных задач и пост-обработки, может требовать дополнительной цветокоррекции и совместимых устройств.

Соотношение сторон

У вас есть возможность выбрать одно из 6 предложенных соотношений сторон.

После выставления всех настроек, нажмите кнопку «Сохранить и закрыть». Далее необходимо перейти к загрузке изображений.

Загрузка изображений

Технические требования к изображениям:

  • Вы можете добавлять изображения в формате JPEG, PNG и HEIC.
  • Максимальный вес файла - 10 MB.
  • Первое загруженное изображение будет использоваться как «первый кадр» в генерации.
  • Второе загруженное изображение будет использоваться как «последний кадр» в генерации.

Например:

После загрузки референсов вам необходимо прописать текстовой запрос, чтобы задать движение вашим изображениям.

Создание текстового запроса

Залог успешной генерации - это структурированный запрос, который помогает модели корректно понять вашу идею.

В текстовом запросе необходимо указать главный объект и его действие, пространство и время суток, стиль и настроение, а также движение камеры - при необходимости.

❣️ Вы можете не указывать текстовый запрос, если желаете доверить работу нейросети. В таком случае нейросеть самостоятельно подберет движения под загруженные изображения.

Например:

«Растения начинают постепенно появляться на поверхности дома: тонкие побеги медленно прорастают вдоль стен, цветы раскрываются один за другим. Зелень мягко расползается по фасаду, обвивая окна и края здания. Стиль - кинематографичный, реалистичный, с насыщенной, но естественной цветовой палитрой».

После загрузки изображений и ввода текстового запроса, нажмите кнопку «Сгенерировать», чтобы запустить процесс генерации.

Результат:

LUMA Ray 2:

LUMA Ray 2 Flash:

LUMA Ray 3:

LUMA Ray 3 Reasoning:

💥Продление видео – пошаговая инструкция.

❣️ Для достижения оптимального качества и содержания видео мы рекомендуем ограничиться 3-4 продлениями. Вы можете увеличить продолжительность одного видео до 30 секунд.

Создание видео 

Для начала создайте первую часть вашего видео - именно с неё начнётся финальный ролик. Подробные инструкции для каждого варианта начала видео приведены выше.

Например:

После того как вы получили нужный результат и хотите добавить продолжение, нажмите кнопку «Продлить видео».

У вас откроется окно для ввода текстового запроса, где вы можете прописать, как именно необходимо продлить видео.

❣️ Вы можете не указывать текстовый запрос, если желаете доверить работу нейросети. В таком случае нейросеть самостоятельно подберет движения для продолжения.

Результат:

🎥 Контроль перемещений камеры в Luma

Добавьте команду в начало своего текстового запроса и готово.

  • Camera move left - камера движется влево
  • Camera move right - камера движется вправо
  • Camera move up - камера движется вверх
  • Camera move down - камера движется вниз
  • Camera push in - приближение (zoom-in)
  • Camera pull out - отдаление (zoom-out)
  • Camera pan left - поворот камеры влево
  • Camera pan right - поворот камеры вправо
  • Camera orbit left - вращение камеры вокруг объекта влево
  • Camera orbit right - вращение камеры вокруг объекта вправо
  • Camera crane up - вращение камеры вверх
  • Camera crane down - вращение камеры вниз

"Врач идёт, камера поворачивается вправо."

"Женщина смотрит на цветы, камера наклонена вверх."

Видео по теме на YouTube

Смотреть полный выпуск: тут

Мы искренне надеемся, что данная инструкция поможет вам лучше понять и эффективно использовать инструмент LUMA: Dream Machine. Мы старались сделать этот процесс максимально простым и интуитивно понятным. Не забывайте: каждая ошибка — это шаг к успеху. Если что-то не получается с первого раза, не расстраивайтесь. Экспериментируйте, изучайте, и вы обязательно достигнете желаемых результатов 💛

SYNTX AI: Syntx AI
SYNTX Сообщество: Syntx Community
Блог SYNTX FAMILY: Syntx Family Служба Заботы SYNTX: Syntx Support

Graph View

Backlinks