Google выпустили новую модель — Gemini Omni

И это не просто генератор видео по промпту или начальному кадру, это генератор из всего.

Можно создавать и редактировать клипы из видео, изображений, аудио, текста и эскизов.

Пользователь может записать обычное видео, а затем попросить Omni добавить персонажа, заменить объект, изменить действие, изменить стиль, синхронизировать звук или переместить камеру с помощью обычного запроса.

Видео из X.

По стоимости: ещё не нашёл расценки, но скорее всего дорого.

@upgrade_id

В продолжении о Gemini Omni…

Прикрепил к посту ещё несколько примеров работы омни. Последний особенно интересен, там прямое сравнение генерации видео в Seedance и Omni. Как видите, именно генерирует модель от гугла довольно скучно.

Но нужно понимать, что сравнивать их в этом ключе не нужно. Gemini Omni — это модель для РЕДАКТИРОВАНИЯ видео, а не создания с нуля.

Сейчас оптимальный пайплайн по созданию видео следующий:

Сцены в виде изображений создаем в NanoBanana / GPT IMAGE 2, анимируем через Kling / Seedance + опционально редактируем кадры в Gemini Omni. Монтируем.

@upgrade_id