Google представил ИИ-модель Veo 3 для генерации видео со звуком: она может добавить в видео звуковые эффекты, фоновый шум и даже диалоги.

Veo 3 понимает контекст кадров, генерирует звуки и синхронизирует их с визуальным контентом. «Veo 3 отлично справляется с подсказками в виде текста и изображений, а также с реальной физикой и точной синхронизацией губ».

Пользователи уже успели потестить новую ИИ-модель: сгенерировали ролики с пением оперной дивы, массовой сценой с перестрелкой, выступлением корреспондента, АСМР и стендапом.

Помимо генерации видео и звуков в Veo 3 стали доступны:

-Генерация видео по изображениям.

-Анимация персонажей через пользовательский ввод — использование голоса, жестов и мимики из загруженного видео для анимации персонажей.

Возможности управления камерой, среди которых: указание точных движений камеры; плавные переходы между кадрами; дополнение кадра; добавление новых объектов с сохранением целостности сцены.

-Функции для управления стилем и персонажами.

-Сохранение одинакового внешнего вида персонажей в разных сценах.

-Улучшенное следование промптам — воспроизведение сложных сценариев и последовательностей.

-Поддержка вывода в разрешении 4K.

Попробовать Veo 3 можно:

-в Google AI Studio за $125 в месяц;

-через приложение Gemini для подписчиков плана AI Ultra за $249 в месяц.

Для России Google AI Studio и Gemini API недоступны, но думаю, что через vpn будет работать.