Что такое Google Veo и как его попробовать

Запуск Sora от OpenAI открыл двери для приложений для создания видео на базе искусственного интеллекта, которые могут создавать короткие клипы из текстовых подсказок. Теперь в борьбу вступила и компания Google, анонсировав на этой неделе на своей ежегодной конференции разработчиков систем ввода-вывода собственное ИИ-приложение Veo, генерирующее видео.

Однако, как и многие другие недавно анонсированные инструменты искусственного интеллекта, новый видеогенератор пока недоступен для публичного использования. Google планирует предоставить художникам и создателям возможность опробовать этот инструмент с помощью краудсорсинговых упражнений, которые могут помочь его улучшить. Вот что еще мы узнали о Google Veo.

Видео радужного слона, связанного крючком, созданное с помощью Veo. Источник: Гугл

Что может сделать Вео?

Google Veo может создавать видео 1080p продолжительностью более минуты, а вы также можете редактировать их с помощью письменных инструкций. Это может гарантировать, что кадры визуально согласованы, и пользователи могут использовать одну подсказку или серию подсказок, которые создают повествование. Инструмент может включать кинематографические эффекты, такие как снимки с воздуха, и создавать высокодетализированные сцены.

При создании видео с помощью Veo вы можете использовать реализм, сюрреализм и даже анимацию. Помимо этого, он позволяет использовать команды кинопроизводства и понимает такие термины, как «воздушная съемка» и «таймлапс». По сравнению с предыдущими генераторами видео с искусственным интеллектом, анонсированными Google, Veo предлагает больший контроль и обеспечивает лучшее качество видео.

Veo также поддерживает редактирование по маске, которое позволяет вносить изменения в определенные разделы видео. Вы можете сделать это, включив в приглашение область маски, а изображения также можно использовать вместе с текстовыми подсказками для создания видео.

В таком случае он будет использовать предоставленное изображение в качестве образца и создать видео в том же стиле, например следующее видео, которое было создано с использованием изображения альпак в вязаных свитерах и подсказки Alpacas dancing to the beat.

Источник: Гугл

Как работает Вео?

Модели видеоИИ должны правильно понимать подсказки, которые им предоставляются, и комбинировать эту информацию с доступными ссылками. Veo был разработан так, чтобы исключительно хорошо понимать естественный язык и визуальные эффекты, что позволяет ему точно создавать видео, в том числе с несколькими деталями.

Благодаря этому запрос типа Timelapse of a common sunflower opening, dark backgroundможет предоставить вам очень качественное видео.

Источник: Гугл

По данным Google, Veo улучшает другие инструменты создания видео, анонсированные компанией ранее, такие как Lumiere, VideoPoet, WALT и т. д., за счет использования сжатого скрытого видео. В отличие от этих инструментов, Veo обучен детальным субтитрам к видео, что помогает ИИ лучше понимать подсказки.

Google заявляет, что видеогенератор использует скрытые диффузионные преобразователи, которые обеспечивают согласованность и предотвращают мерцание и перескакивание персонажей и объектов между сценами. Он также использует скрытые файлы, которые представляют собой сжатые представления видео, которые делают его более эффективным и помогают повысить производительность. Благодаря этому Veo может создавать высококачественные видеоролики за меньшее время.

Видео, которые вы создаете с помощью Veo, будут помечены водяными знаками с использованием SynthID Google, который он использует для идентификации контента, созданного искусственным интеллектом, аналогично тому, что Sora от OpenAI делает через стандарт Коалиции за происхождение и подлинность контента (C2PA).

Кроме того, существуют процессы проверки запоминания и фильтры безопасности, которые помогают снизить риски предвзятости, авторских прав и конфиденциальности. Несмотря на эти технологии и процессы, Veo все еще нуждается в некоторых улучшениях, поскольку фон по-прежнему имеет тенденцию меняться, а высокодетализированные области кажутся не очень хорошо совмещенными. Вот почему Google разрешает протестировать его только нескольким создателям.

Как вы можете использовать Veo?

Как упоминалось выше, Veo в настоящее время недоступен для публичного использования, и Google разрешает опробовать этот инструмент лишь нескольким избранным создателям. Они могут опробовать это с помощью VideoFX, еще одного экспериментального инструмента, доступного в Google Labs, где присутствуют все продукты Google, находящиеся на тестировании.

Если вы автор и хотите попробовать Veo,

Посетите веб-сайт Google Labs, чтобы присоединиться к списку ожидания.
Введите свои данные и отправьте их.
Подождите, пока Google проверит вашу заявку. Если он сочтет это подходящим, вам будет разрешено опробовать Veo.

Google Veo — новейший в длинной линейке видеогенераторов на базе искусственного интеллекта, анонсированных Google, и, похоже, самый мощный на данный момент. Он позволяет не только создавать видеоролики с использованием различных стилей и эффектов, но и легко редактировать созданные видеоролики.

Мы объяснили, как создатели могут присоединиться к списку ожидания и опробовать инструмент самостоятельно, но неизвестно, будет ли Veo запущен публично. Google лишь намекнул, что некоторые возможности инструмента могут быть использованы в короткометражках на YouTube, так что есть на что рассчитывать.