Вот все, что вам нужно знать о последнем конкуренте Соры, Dream Machine, от Luma AI

OpenAI покорила мир, запустив ChatGPT в 2022 году, поразив всех возможностями чат-бота в поиске информации и ответах на вопросы, сохраняя при этом контекст разговора. Затем компания повторила этот подвиг, представив Sora, который может создавать высококачественные видео, используя только текстовые подсказки.

Однако на этот раз конкуренция стала более острой, и конкурирующие компании анонсируют похожие продукты. И последняя среди них — Dream Machine от Luma AI. Известная своей платформой, которая позволяет пользователям создавать 3D-модели с текстовыми, графическими или видеовходами, новая Dream Machine от компании стремится сделать генерацию видео с помощью ИИ более простой и доступной для всех.

Что такое «Машина мечты»?

Dream Machine — это универсальный генератор текста в видео, разработанный Luma AI и использующий передовые алгоритмы, которые позволяют ему генерировать высококачественные видео с помощью простых подсказок, предоставляемых пользователями. Это очень полезный инструмент для создателей контента, предприятий, маркетологов и других, который можно использовать для создания видео длиной до пяти секунд и в разных стилях.

В отличие от многих других видеогенераторов, видеоролики, созданные с помощью Dream Machine, достаточно близки к описаниям, представленным в подсказках. Благодаря этому можно создавать видеоролики с невероятно детализированными сценами, сложной анимацией и реалистичными движениями персонажей. Dream Machine основана на модели трансформера и обучалась непосредственно на видео.

Кадр со штурмовиками из видео, созданного Dream Machine. Источник: Лума А.И.

Особенности машины мечты

Dream Machine от Luma AI обладает определенными функциями, которые позволяют ей конкурировать с такими крупными игроками, как Sora, на рынке генерации видео с использованием искусственного интеллекта.

Генерация видео высокого разрешения

Dream Machine может создавать видео кинематографического качества с разрешением 1080p, что делает их не только потрясающими на вид, но и пригодными для профессионального использования.

Точная симуляция и реалистичное движение

Согласно Luma AI, Dream Machine может понимать, как люди, животные и объекты взаимодействуют в реальном мире, что позволяет ей создавать видео с точной физикой. Она использует пространственно-временной механизм совместного внимания для точного отображения физических взаимодействий и сложных действий в реальном мире, что приводит к созданию естественно выглядящих видео.

Поддержка нескольких соотношений сторон

Dream Machine может создавать видео с разными соотношениями сторон, что делает его пригодным для самых разных целей. Вы можете использовать его для создания видеороликов для маркетинговых и рекламных целей, образовательных нужд, социальных сетей и многого другого.

Удобный интерфейс

Доступность для пользователя — ключевая особенность Dream Machine, а платформа имеет интуитивно понятный интерфейс, упрощающий создание видео. Благодаря этому пользователи с разным уровнем квалификации и опытом могут без проблем использовать его, что делает его доступным для широкого круга аудиторий.

Фреймворк с открытым исходным кодом

В отличие от Sora от OpenAI, Dream Machine имеет инфраструктуру с открытым исходным кодом, что позволяет получить доступ к ней практически любому, у кого есть знания и опыт в области кодирования. Напротив, Sora доступна только избранной аудитории, и ожидается, что ее основные функции останутся эксклюзивными для платных подписчиков.

Быстрое улучшение

Dream Machine также имеет функцию «Улучшение», которая автоматически добавляет больше деталей к вашей подсказке, помогая ИИ генерировать более сложные видео. Когда вы включаете ее, вы можете использовать простые подсказки вместо подробных, и ИИ улучшит ее, используя языковую модель Luma для более подробных видео. Вы можете отключить эту функцию, если хотите вручную добавить больше деталей к вашей подсказке.

Видео Luma AI Dream Machine — Видео создано Dream Machine. Источник: Лума А.И.

Как можно использовать Dream Machine?

Использование Dream Machine от Luma AI требует чрезвычайно подробных подсказок, более подробных, чем те, которые вы используете с другими инструментами искусственного интеллекта, такими как ChatGPT. Вот как вы можете бесплатно опробовать платформу для создания видео прямо сейчас.

Чтобы опробовать платформу, посетите официальную страницу и нажмите кнопку «Попробовать сейчас» в правом верхнем углу.

Далее вам нужно будет войти в свою учетную запись Google. Для этого нажмите кнопку «Войти через Google» на появившейся странице.

Вам необходимо предоставить платформе разрешение на доступ к вашему аккаунту Google. Нажмите кнопку «Продолжить», чтобы продолжить.

Наконец, вы можете ввести свой запрос в предоставленное поле. Введите подробный запрос, например a close-up shot of an eagle soaring through the sky, looking down on the ground for prey. По умолчанию опция «Расширить запрос» будет включена, но вы можете отключить ее, если хотите, щелкнув внутри флажка. Щелкните стрелку вверх, чтобы сгенерировать свое видео.

Подождите несколько минут, пока Dream Machine сгенерирует видео. Когда процесс будет завершен, вы увидите сгенерированное видео в разделе «Мои творения». Нажатие на него запустит воспроизведение видео.

Если вы хотите продлить видео, нажмите кнопку «Продлить» под видео.

Это вызовет окно подсказки, где вы можете добавить больше деталей для продления видео. Введите подсказку, поставьте отметку «Нравится» the eagle lands on a rock next to a river, looking at fishes jumping out of the water and back insideи нажмите кнопку со стрелкой.

Dream Machine продлит ваше видео на пять секунд, используя предоставленную вами новую подсказку.

Вы также можете загрузить сгенерированные видео, нажав кнопку «Загрузить».

Ограничения использования и цены

Хотя вы можете использовать Dream Machine бесплатно, для этого вам придется зарегистрировать учетную запись на платформе. Бесплатный план позволяет пользователям создавать 30 видеороликов в месяц, но есть платный план стоимостью 499 долларов США, который позволяет создавать до 2000 видеороликов в месяц. Кроме того, из-за высокого спроса платформа ограничивает количество бесплатных генераций до 5 в день. Однако для платных пользователей ежедневных ограничений нет.

Ограничения платформы

Хотя Dream Machine может создавать высококачественные видео, у платформы есть определенные ограничения, о которых вам следует знать. К ним относится знаменитая проблема Януса, при которой платформа показывает несколько видов объекта в разных направлениях вместо обеспечения последовательного трехмерного вывода. Кроме того, есть проблемы с морфингом, текстом и движением.

Однако это проблемы, которые довольно распространены в продуктах для преобразования текста в видео, поэтому они характерны не только для Dream Machine.

Dream Machine похож на многие другие инструменты для генерации видео, которые становятся доступными на рынке. Однако его отличает высокое качество создаваемых видео и его фреймворк с открытым исходным кодом. К сожалению, его ограничения в его текущем состоянии означают, что Luma AI еще предстоит пройти долгий путь, прежде чем платформа станет пригодной для регулярного использования.

Если вы хотите попробовать, вы можете сделать это, как мы объяснили выше, хотя мы рекомендуем вам освободить свой день от других дел, поскольку из-за высокого спроса вам, возможно, придется ждать своей очереди.