Gemini Omni Text to Video
Создавайте видео из текстовой подсказки с синхронизированными диалогами, окружающим звуком и музыкой за один проход.
Gemini Omni — это изначально мультимодальное семейство видео от Google, работающее по принципу «любой-к-любому». Текст, изображения, видео, голосовые профили и профили персонажей могут работать вместе в одном потоке генерации.Muapi предоставляет Gemini Omni и Gemini Omni 1.1 Flash через один асинхронный API, включая синхронизированные диалоги, окружающий звук, музыку, редактирование видео, многоразовые голоса и согласованные символы.
Создавайте видео из текстовой подсказки с синхронизированными диалогами, окружающим звуком и музыкой за один проход.
Анимируйте до пяти эталонных изображений в сцене с собственным синхронизированным звуком.
Редактируйте, изменяйте стиль, меняйте освещение, меняйте местами или переписывайте диалоги в исходном материале, сохраняя при этом их движение и время.
Создайте многоразовый голосовой профиль из одного из 30 предустановленных голосов и получите аудиоидентификатор для последующих поколений.
Создайте многоразовый профиль персонажа из одного эталонного изображения и получите идентификатор персонажа.
Объедините текст со справочными изображениями, коротким справочным видео, голосовыми профилями или профилями персонажей и собственным звуком.
Создайте из начального ключевого кадра с дополнительным конечным ключевым кадром для управляемых переходов.
Примените текстовую инструкцию, чтобы изменить стиль, освещение, преобразование или перезапись исходного видео.
Управляйте сценой, используя до семи изображений и три коротких справочных видеоклипа.
Gemini Omni — это родное семейство мультимодальных видеомоделей Google, работающее по принципу "любой-к-любому". Вместо того, чтобы сначала создавать видео, а потом добавлять звук, он может анализировать текст, изображения, видео и аудио вместе, создавая синхронизированные диалоги, окружающий звук и музыку.
Muapi предоставляет исходные конечные точки Gemini Omni, а также Близнецы Омни 1.1 Флэш для управления ключевыми кадрами, короткими видеоссылками и доставкой 4K. Каждый рабочий процесс использует один и тот же контракт REST отправки и опроса.
Перемещайтесь между текстом, изображениями, видео и аудио в одном мультимодальном рабочем процессе вместо объединения отдельных моделей.
Создавайте диалоги, окружающий звук и музыку с помощью общего прямого прохода видео.
Создавайте новые сцены, анимируйте эталонные изображения или преобразуйте существующие кадры, используя целевые конечные точки.
Выберите один из 30 предустановленных голосов, сохраните возвращенный аудиоидентификатор и повторно используйте одинаковый голос в последующих вызовах.
Создайте идентификатор персонажа из одного эталонного изображения и повторно используйте его в созданных сценах.
Используйте асинхронные запросы Muapi, стандартный опрос прогнозов и доступ с оплатой за поколение без подписки.
Управляйте сценой, камерой, персонажем и диалогом из одной насыщенной подсказки с собственным звуком.
Объедините изображения продуктов, голосовые профили и управляемое редактирование видео для наглядной демонстрации.
Повторно используйте профили персонажей и голоса, чтобы повторяющиеся таланты оставались неизменными в разных эпизодах.
Изменяйте стиль, освещение, меняйте местами или переписывайте диалоги в существующих кадрах с помощью текстовых инструкций.
Используйте изображения и короткие видеоролики, чтобы определить гардероб, композицию, движение и тон.
Добавляйте собственный звук и мультимодальные входные данные через одну поверхность API, когда общей конечной точки видео недостаточно.
| Рабочий процесс | Входы | Выход | Начальная цена |
|---|---|---|---|
Отправьте мультимодальное приглашение на соответствующую конечную точку Gemini Omni, сохраните идентификатор запроса и опросите стандартную конечную точку результатов для видео- и аудиовыходов.
Начните с конечной точки преобразования текста в видео, затем добавьте эталонные входы, голосовые идентификаторы или идентификаторы персонажей в соответствии с требованиями вашего рабочего процесса.
Опрос до завершения и чтение сгенерированного видео и URL-адреса синхронизированного аудио из ответа.
Gemini Omni — это изначально мультимодальное семейство видео «любой к любому». Muapi предоставляет рабочие процессы преобразования текста в видео, изображения в видео и редактирования видео, которые могут генерировать синхронизированный звук за один проход.
Gemini Omni разработан для ввода текста, изображений, аудио и видео в одном рабочем процессе с собственным звуком и целевыми конечными точками редактирования исходного видео. Лучший выбор зависит от элементов управления и стиля, которые необходимы вашему проекту.
Стоимость преобразования текста в видео и изображения в видео начинается от 0,16 доллара США за поколение. Стоимость редактирования видео начинается от 2,40 доллара США, а рабочие процессы Flash-видео 1.1 стоят от 0,048 доллара США или 0,10 доллара США в секунду в зависимости от конечной точки и варианта вывода.
Используйте текстовую подсказку, до пяти эталонных изображений для преобразования изображения в видео или исходное видео, а также инструкции по редактированию. Сгенерированное видео может включать синхронизированный звук, а для вызовов можно использовать до трех сохраненных голосовых идентификаторов и трех идентификаторов символов.
Gemini Omni Audio создает многоразовый голосовой профиль из 30 предустановленных голосов. Muapi возвращает аудиоидентификатор, который можно передать последующим поколениям видео, используя до трех аудиоидентификаторов на запрос.
Gemini Omni Character создает многоразовый профиль персонажа из одного эталонного изображения. Возвращенный идентификатор персонажа можно использовать в последующих поколениях, используя до трех идентификаторов символов на запрос.
Да. Используйте соотношение сторон, поддерживаемое выбранной конечной точкой, включая композиции 16:9 и 9:16 для горизонтальной и вертикальной доставки.
Нет. Gemini Omni доступен через API Muapi с оплатой за поколение. Создайте ключ API Muapi и вызовите конечную точку напрямую.
Используйте один асинхронный API для мультимодального видео, собственного звука, голосовых профилей и согласованных символов.