Выразительное преобразование текста в видео
Опишите сцену, действие или повествование и создайте стилизованный клип с плавным движением персонажей и связным визуальным повествованием.
HappyHorse 1.0 — это модель искусственного интеллекта Alibaba с открытым исходным кодом для выразительного, стилизованного создания и редактирования. Он сочетает в себе исходное разрешение 1080p, яркое движение персонажей, сцены с эталонными условиями и редактирование видео на естественном языке в восьми вариантах Muapi.
Закрытая бета-версия игровой площадки
HappyHorse 1.0 в настоящее время доступен на игровой площадке Муапи на Планы Pro и Business. Доступ к API-ключу откроется в более поздней публичной версии.
HappyHorse 1.0 — это видеомодель искусственного интеллекта Alibaba с открытым исходным кодом для создания выразительного, стилизованного видео. Он преобразует текстовые подсказки, неподвижные изображения и визуальные ссылки в сцены с ярким движением персонажей и динамичным повествованием.
Опишите сцену, действие или повествование и создайте стилизованный клип с плавным движением персонажей и связным визуальным повествованием.
Оживите неподвижное изображение с помощью дополнительного направления движения, движения камеры и управления настроением.
Используйте от одного до девяти эталонных изображений, чтобы закрепить персонажа, продукт или визуальный стиль в созданных кадрах.
Изменяйте одежду, реквизит, окружение или детали персонажей в существующем видео, сохраняя при этом исходное движение.
Используйте 720p для быстрой и экономичной итерации и 1080p, когда финальная версия требует более высокого разрешения.
Сохраняйте ту же аутентификацию Muapi и жизненный цикл асинхронных запросов при переключении между режимами генерации и редактирования.
HappyHorse 1.0 позиционируется как ведущая видеомодель с открытым исходным кодом для преобразования текста в видео и изображения в видео. Сочетание выразительного движения, широких визуальных стилей, встроенного вывода 1080p и быстрой итерации делает его полезным для раскадровки, социального контента, анимации продуктов, а также концептуальной работы над играми или фильмами.
Все восемь вариантов HappyHorse 1.0 используют общую аутентификацию с помощью API-ключа Muapi, асинхронный жизненный цикл задач и конечную точку результата прогнозирования. Начните в Детская площадкадля проверки подсказок, а затем переместите ту же форму полезных данных в свое приложение, когда доступ к API включен для вашего плана. Дополнительную информацию и контекст выпуска см. Руководство по API HappyHorse 1.1.
| Вариант | Режим | Выход | Вход | Цена |
|---|---|---|---|---|
Бета-версия Playground в настоящее время ограничивает доступ по плану. Цены за секунду, указанные выше, отражают текущие цены модели Muapi; перед использованием в рабочей среде проверьте действующую схему и доступность плана.
Создавайте короткие сюжетные кадры, раскадровки и моменты персонажей на основе письменных описаний сцен.
Анимируйте фотографии продуктов или эталонные изображения в фирменные клипы для кампаний, электронной коммерции и социальных сетей.
Превратите концепт-арт, мудборды и визуальные ссылки в движущийся презентационный материал и тесты по построению мира.
Используйте редактирование на естественном языке, чтобы проверить гардероб, реквизит, погоду, освещение и изменения окружающей среды без перестройки отснятого материала.
Выберите вариант, отправьте его полезные данные JSON, определенные схемой, с помощью ключа API Muapi, сохраните идентификатор запроса и опросите стандартную конечную точку результата. Используйте общедоступные URL-адреса изображений или видео для медиа-входов.
Отправьте запрос, соотношение сторон и продолжительность на конечную точку преобразования текста в видео 720p или 1080p.
Передайте одно начальное изображение в images_list и при необходимости опишите желаемое движение с помощью подсказки.
Закрепите сцену с помощью от одного до девяти эталонных изображений и подсказки, описывающей движение, кадрирование и настроение.
Предоставьте video_url и инструкции по редактированию на естественном языке; дополнительные эталонные изображения и audio_setting уточняют результат.
HappyHorse 1.0 — это семейство видеомоделей искусственного интеллекта Alibaba с открытым исходным кодом для выразительного преобразования текста в видео, изображения в видео, ссылок на видео и редактирования видео на естественном языке.
Да, он доступен в бета-версии Muapi Playground в планах Pro и Business. Доступ к общедоступному API-ключу запланирован на более поздний выпуск.
Для каждого поколения и режима редактирования есть вариант 720p и собственный вариант 1080p. Используйте 720p для итерации и 1080p для доставки с более высоким разрешением.
Варианты с ссылкой на видео принимают от одного до девяти эталонных изображений. Варианты редактирования видео допускают до пяти дополнительных эталонных изображений.
Передайте одно изображение в images_list. Подсказка не является обязательной для варианта преобразования изображения в видео 1080p и может указывать на движение камеры, направление движения или настроение.
Да. Варианты редактирования видео принимают video_url и инструкцию на естественном языке с дополнительными эталонными изображениями и элементами управления audio_setting.
Текущая цена Muapi составляет 0,18 доллара США в секунду для преобразования текста/изображения в видео 720p и 0,36 доллара США в секунду для 1080p; ссылка на видео и редактирование видео составляют 0,21 доллара США в секунду при разрешении 720p и 0,42 доллара США в секунду при разрешении 1080p. Проверьте живую игровую площадку и спланируйте ворота перед производственным использованием.
Используйте закрытую бета-версию Playground, чтобы протестировать выразительную генерацию видео, обработку эталонов и редактирование на естественном языке.