AI Avatar & Lipsync API — говорящие видео и дубляж

Что такое AI-аватар и API синхронизации губ?

AI Lipsync API берет существующее видео и новую звуковую дорожку и повторно синхронизирует движения рта в соответствии с ними — стандартный инструмент для дублирования видео говорящей головы на новый язык без его повторной съемки. Вместо этого API-интерфейс AI-аватара начинается с одного портретного изображения и аудиоклипа и генерирует совершенно новое говорящее видео с нуля — исходные кадры не требуются. Оба решают одну и ту же основную проблему (заставляют лицо произносить заданную звуковую дорожку) с разными начальными входными данными.

Muapi предоставляет более 500 моделей, включая все модели синхронизации губ и генерации аватаров на этой странице, с помощью одного и того же унифицированного шаблона REST: один ключ API, один поток запросов/опросов, цена с оплатой за поколение без подписки.

Ключевые возможности

Сравнение моделей аватара и Lipsync

Как вызвать API AI Lipsync

1. Выберите модель — видеосинхронизация губ, если у вас есть исходные кадры, генерация аватара AI, если у вас есть только фотография — используя сравнительную таблицу выше.
2. Отправьте запрос. POST /api/v1/{model-slug} с URL-адресом видео или изображения и URL-адресом аудио.
3. Опрос для завершения. Проверяйте GET /api/v1/predictions/{request_id}/result до тех пор, пока статус не будет завершен, а затем загрузите выходное видео.

curl -X POST https://api.muapi.ai/api/v1/sync-lipsync \
  -H "Content-Type: application/json" \
  -H "x-api-key: YOUR_API_KEY" \
  -d '{
    "video_url": "https://example.com/talking-head.mp4",
    "audio_url": "https://example.com/new-narration.mp3"
  }'

import requests

response = requests.post(
    "https://api.muapi.ai/api/v1/sync-lipsync",
    headers={"x-api-key": "YOUR_API_KEY"},
    json={
        "video_url": "https://example.com/talking-head.mp4",
        "audio_url": "https://example.com/new-narration.mp3",
    },
)
request_id = response.json()["request_id"]

result = requests.get(
    f"https://api.muapi.ai/api/v1/predictions/{request_id}/result",
    headers={"x-api-key": "YOUR_API_KEY"},
)
print(result.json())

Часто задаваемые вопросы