Gemini Omni Tekst na wideo
Generuj wideo na podstawie podpowiedzi tekstowych ze zsynchronizowanymi dialogami, dźwiękiem otoczenia i muzyką w tym samym przebiegu.
Gemini Omni to natywnie wielomodalna rodzina filmów Google, umożliwiająca dostęp do dowolnego źródła wideo. Tekst, obrazy, wideo, profile głosowe i profile postaci mogą współpracować w ramach jednego przepływu generacji.Muapi udostępnia Gemini Omni i Gemini Omni 1.1 Flash za pośrednictwem jednego asynchronicznego interfejsu API, obejmującego zsynchronizowane dialogi, dźwięki otoczenia, muzykę, edycję wideo, głosy wielokrotnego użytku i spójne postacie.
Generuj wideo na podstawie podpowiedzi tekstowych ze zsynchronizowanymi dialogami, dźwiękiem otoczenia i muzyką w tym samym przebiegu.
Animuj do pięciu obrazów referencyjnych w scenie z natywnym zsynchronizowanym dźwiękiem.
Edytuj, zmieniaj styl, ponownie oświetlaj, zamieniaj lub przepisz dialogi w materiale źródłowym, zachowując jednocześnie ich ruch i synchronizację.
Utwórz profil głosowy wielokrotnego użytku z jednego z 30 gotowych głosów i otrzymaj identyfikator audio dla późniejszych generacji.
Utwórz profil postaci wielokrotnego użytku z jednego obrazu referencyjnego i otrzymaj identyfikator postaci.
Połącz tekst z obrazami referencyjnymi, krótkim filmem referencyjnym, profilami głosowymi lub profilami postaci oraz natywnym dźwiękiem.
Generuj na podstawie początkowej klatki kluczowej z opcjonalną końcową klatką kluczową dla kontrolowanych przejść.
Zastosuj instrukcje tekstowe, aby zmienić styl, odświeżyć, przekształcić lub napisać na nowo źródłowy film wideo.
Prowadź scenę za pomocą maksymalnie siedmiu obrazów i trzech krótkich referencyjnych klipów wideo.
Gemini Omni to natywna rodzina multimodalnych modeli wideo firmy Google, umożliwiająca dostęp do dowolnego urządzenia. Zamiast najpierw generować wideo, a później dodawać dźwięk, może łączyć tekst, obrazy, wideo i dźwięk, tworząc zsynchronizowane dialogi, dźwięk otoczenia i muzykę.
Muapi zapewnia oryginalne punkty końcowe Gemini Omni plus Gemini Omni 1.1 Flashdo sterowania klatkami kluczowymi, krótkich referencji wideo i dostarczania 4K. Każdy przepływ pracy korzysta z tego samego kontraktu REST przesyłania i sondowania.
Poruszaj się pomiędzy tekstem, obrazami, wideo i dźwiękiem w ramach jednego wielomodalnego przepływu pracy, zamiast łączyć ze sobą oddzielne modele.
Generuj dialogi, dźwięki otoczenia i muzykę za pomocą wideo w ramach wspólnego przejścia do przodu.
Twórz nowe sceny, animuj obrazy referencyjne lub przekształcaj istniejący materiał filmowy za pomocą skupionych punktów końcowych.
Wybierz jeden z 30 gotowych głosów, zapisz zwrócony identyfikator audio i użyj spójnego głosu w późniejszych połączeniach.
Utwórz identyfikator postaci z jednego obrazu referencyjnego i używaj go ponownie w wygenerowanych scenach.
Korzystaj z asynchronicznych żądań Muapi, standardowego odpytywania predykcyjnego i dostępu płatnego za generację bez subskrypcji.
Steruj sceną, kamerą, postacią i dialogiem za pomocą jednego bogatego podpowiedzi z natywnym dźwiękiem.
Połącz zdjęcia produktów, profile głosowe i kontrolowane edycje wideo, aby uzyskać przejrzyste demonstracje.
Wykorzystuj ponownie profile postaci i głosów, aby zapewnić spójność powtarzających się talentów w różnych odcinkach.
Zmień styl, rozjaśnij, zamień lub napisz na nowo dialogi w istniejącym materiale filmowym, korzystając z instrukcji tekstowych.
Użyj obrazów i krótkich odniesień wideo, aby określić garderobę, kompozycję, ruch i ton.
Dodaj natywne wejścia audio i multimodalne za pośrednictwem jednego interfejsu API, gdy ogólny punkt końcowy wideo nie wystarczy.
| Przebieg pracy | Wejścia | Wyjście | Cena początkowa |
|---|---|---|---|
Prześlij monit multimodalny do pasującego punktu końcowego Gemini Omni, zapisz identyfikator żądania i odpytuj standardowy punkt końcowy wyniku pod kątem wyjść wideo i audio.
Zacznij od punktu końcowego zamiany tekstu na wideo, a następnie dodaj referencyjne wejścia, identyfikatory głosowe lub identyfikatory znaków, zgodnie z wymaganiami przepływu pracy.
Odpytuj aż do zakończenia i przeczytaj wygenerowany film oraz zsynchronizowany adres URL audio z odpowiedzi.
Gemini Omni to natywnie multimodalna rodzina wideo dla każdego. Muapi udostępnia przepływy pracy polegające na przetwarzaniu tekstu na wideo, obraz na wideo i edycję wideo, które mogą generować zsynchronizowany dźwięk w tym samym przebiegu.
Gemini Omni został zaprojektowany z myślą o wejściu tekstu, obrazu, dźwięku i wideo w jednym przepływie pracy, z natywnym dźwiękiem i punktami końcowymi edycji skoncentrowanego źródła wideo. Najlepszy wybór zależy od elementów sterujących i stylu wymaganego przez projekt.
Ceny zamiany tekstu na wideo i obrazu na wideo zaczynają się od 0,16 dolara za pokolenie. Edycja wideo zaczyna się od 2,40 USD, natomiast przepływy pracy wideo w wersji 1.1 Flash kosztują od 0,048 USD lub 0,10 USD za sekundę, w zależności od punktu końcowego i opcji wyjściowej.
Użyj podpowiedzi tekstowej, maksymalnie pięciu obrazów referencyjnych do konwersji obrazu na wideo lub źródła wideo oraz instrukcji edycji. Wygenerowane wideo może zawierać zsynchronizowany dźwięk, a w połączeniach można używać maksymalnie trzech zapisanych identyfikatorów głosowych i trzech identyfikatorów znakowych.
Gemini Omni Audio tworzy profil głosowy wielokrotnego użytku z 30 gotowych głosów. Muapi zwraca identyfikator audio, który można przekazać późniejszym generacjom wideo, z maksymalnie trzema identyfikatorami audio na żądanie.
Gemini Omni Character tworzy profil postaci wielokrotnego użytku na podstawie jednego obrazu referencyjnego. Zwrócony identyfikator znaku może zostać użyty w późniejszych generacjach, z maksymalnie trzema identyfikatorami znaków na żądanie.
Tak. Użyj współczynnika proporcji obsługiwanego przez wybrany punkt końcowy, w tym kompozycji 16:9 i 9:16 do wyświetlania w orientacji poziomej i pionowej.
Nie. Gemini Omni jest dostępny poprzez API płatności za generację Muapi. Utwórz klucz API Muapi i bezpośrednio wywołaj punkt końcowy.
Użyj jednego asynchronicznego interfejsu API dla multimodalnego wideo, natywnego dźwięku, profili głosowych i spójnych znaków.