Chuyển văn bản thành video biểu cảm
Mô tả một cảnh, hành động hoặc câu chuyện và tạo một đoạn clip cách điệu với chuyển động của nhân vật trôi chảy và cách kể chuyện mạch lạc bằng hình ảnh.
HappyHorse 1.0 là mô hình video AI mã nguồn mở của Alibaba để tạo và chỉnh sửa mang tính biểu cảm, cách điệu. Nó kết hợp đầu ra 1080p nguyên bản, chuyển động nhân vật sống động, cảnh có điều kiện tham chiếu và chỉnh sửa video bằng ngôn ngữ tự nhiên trên tám biến thể Muapi.
Sân chơi beta đã đóng
HappyHorse 1.0 hiện có sẵn trong Sân chơi Muapi trên Kế hoạch chuyên nghiệp và kinh doanh. Quyền truy cập khóa API sẽ mở trong bản phát hành công khai sau này.
HappyHorse 1.0 là mô hình video AI mã nguồn mở của Alibaba để tạo video mang tính biểu cảm và cách điệu. Nó dịch các lời nhắc văn bản, hình ảnh tĩnh và tài liệu tham khảo trực quan thành các cảnh có chuyển động nhân vật sống động và cách kể chuyện sinh động.
Mô tả một cảnh, hành động hoặc câu chuyện và tạo một đoạn clip cách điệu với chuyển động của nhân vật trôi chảy và cách kể chuyện mạch lạc bằng hình ảnh.
Làm sống động hình ảnh tĩnh với hướng chuyển động tùy chọn, chuyển động của camera và hướng dẫn tâm trạng.
Sử dụng từ một đến chín hình ảnh tham chiếu để cố định một nhân vật, sản phẩm hoặc phong cách hình ảnh trên các cảnh quay được tạo.
Sửa đổi tủ quần áo, đạo cụ, môi trường hoặc chi tiết nhân vật trong video hiện có trong khi vẫn giữ nguyên chuyển động của nguồn.
Sử dụng 720p để lặp lại nhanh chóng, tiết kiệm chi phí và 1080p khi phân phối cuối cùng cần độ phân giải cao hơn.
Giữ nguyên vòng đời yêu cầu không đồng bộ và xác thực Muapi trong khi chuyển đổi giữa chế độ tạo và chỉnh sửa.
HappyHorse 1.0 được định vị là mô hình video nguồn mở hàng đầu để tạo văn bản thành video và hình ảnh thành video. Sự kết hợp giữa chuyển động biểu cảm, phong cách hình ảnh rộng, đầu ra 1080p gốc và khả năng lặp lại nhanh giúp nó trở nên hữu ích cho bảng phân cảnh, nội dung xã hội, hoạt hình sản phẩm và tác phẩm ý tưởng trò chơi hoặc phim.
Tất cả tám biến thể HappyHorse 1.0 đều sử dụng xác thực khóa API chung của Muapi, vòng đời tác vụ không đồng bộ và điểm cuối kết quả dự đoán. Bắt đầu trong Sân chơi để kiểm tra lời nhắc, sau đó di chuyển hình dạng tải trọng tương tự vào ứng dụng của bạn khi quyền truy cập API được bật cho gói của bạn. Để biết bối cảnh nền và bản phát hành, hãy đọc Hướng dẫn API HappyHorse 1.1dành cho quy trình yêu cầu/thăm dò ý kiến và Sự kiện do máy chủ gửi
| Khác nhau | Chế độ | đầu ra | đầu vào | Giá |
|---|---|---|---|---|
| 1080p | ||||
| 720p | ||||
| 1080p | ||||
| 720p | ||||
| 1080p | ||||
| 720p | ||||
| 1080p | ||||
| 720p |
Bản beta của Playground hiện có quyền truy cập theo gói. Giá mỗi giây ở trên phản ánh giá mô hình Muapi hiện tại; xác minh lược đồ trực tiếp và tính khả dụng của kế hoạch trước khi sử dụng sản xuất.
Tạo các cảnh tường thuật ngắn, trình tự bảng phân cảnh và khoảnh khắc nhân vật từ mô tả cảnh bằng văn bản.
Tạo hoạt ảnh tĩnh cho sản phẩm hoặc hình ảnh tham chiếu thành clip về thương hiệu cho các chiến dịch, thương mại điện tử và mạng xã hội.
Biến nghệ thuật ý tưởng, bảng tâm trạng và tài liệu tham khảo trực quan thành các bài kiểm tra về nội dung quảng cáo chiêu hàng và xây dựng thế giới.
Sử dụng các chỉnh sửa bằng ngôn ngữ tự nhiên để kiểm tra các thay đổi về tủ quần áo, đạo cụ, thời tiết, ánh sáng và môi trường mà không cần phải xây dựng lại cảnh quay.
Chọn một biến thể, gửi tải trọng JSON do lược đồ xác định bằng khóa API Muapi của bạn, lưu ID yêu cầu và thăm dò điểm cuối kết quả tiêu chuẩn. Sử dụng URL hình ảnh hoặc video công khai cho đầu vào phương tiện.
Gửi lời nhắc, tỷ lệ khung hình và thời lượng tới điểm cuối chuyển văn bản sang video 720p hoặc 1080p.
Chuyển một hình ảnh bắt đầu vào Images_list và tùy ý mô tả chuyển động mong muốn bằng lời nhắc.
Gắn một cảnh với từ một đến chín hình ảnh tham chiếu và lời nhắc mô tả chuyển động, khung hình và tâm trạng.
Cung cấp hướng dẫn chỉnh sửa video_url và ngôn ngữ tự nhiên; hình ảnh tham chiếu tùy chọn và audio_setting sẽ tinh chỉnh kết quả.
HappyHorse 1.0 là dòng mô hình video AI mã nguồn mở của Alibaba để chuyển văn bản thành video, hình ảnh thành video, tham chiếu đến video và chỉnh sửa video bằng ngôn ngữ tự nhiên.
Có, nó có sẵn trong phiên bản beta của Muapi Playground trên các gói Pro và Business. Quyền truy cập khóa API công khai được lên kế hoạch cho bản phát hành sau.
Mỗi chế độ tạo và chỉnh sửa có một biến thể 720p và 1080p gốc. Sử dụng 720p để lặp lại và 1080p để phân phối độ phân giải cao hơn.
Các biến thể tham chiếu đến video chấp nhận từ một đến chín hình ảnh tham chiếu. Các biến thể chỉnh sửa video chấp nhận tối đa năm hình ảnh tham chiếu tùy chọn.
Truyền một hình ảnh vào Images_list. Lời nhắc là tùy chọn đối với biến thể chuyển hình ảnh sang video 1080p và có thể hướng dẫn chuyển động của camera, hướng chuyển động hoặc tâm trạng.
Vâng. Các biến thể chỉnh sửa video chấp nhận video_url và hướng dẫn bằng ngôn ngữ tự nhiên, với các hình ảnh tham chiếu tùy chọn và điều khiển cài đặt âm thanh.
Giá Muapi hiện tại là 0,18 USD/giây cho văn bản/hình ảnh thành video 720p và 0,36 USD/giây cho 1080p; chi phí tham chiếu đến video và chỉnh sửa video là 0,21 USD/giây ở 720p và 0,42 USD/giây ở 1080p. Kiểm tra Sân chơi trực tiếp và cổng kế hoạch trước khi sử dụng sản xuất.
Sử dụng phiên bản Playground beta kín để thử nghiệm khả năng tạo video biểu cảm, điều hòa tham chiếu và chỉnh sửa ngôn ngữ tự nhiên.