BytePlus OmniHuman 2.0 est un modèle de génération de vidéos IA piloté par l'audio qui transforme des images et de l'audio en vidéos d'avatars parlants très réalistes. Il prend en charge la synchronisation labiale naturelle, les mouvements faciaux expressifs, les gestes corporels et la génération de vidéos allant jusqu'à 5 minutes.

Pricing: 14 credits per second ($0.07/s), billed on the output video duration. 720P output, length follows the input audio (4–300 s). High-tier top-ups include +10% bonus credits. Effective pricing is approximately 10% lower than the above rates.
Input

Text prompt (Character Tendency). used for precise control of the scene,movements.camera movements,etc. Supported Languages: Only Chinese, English, Japanese, Korean, Spanish (Mexican), Indonesian.

0/300

Click to upload or drag and drop

Supported formats: MPEG, WAV, X-WAV Maximum file size: 15MB

Audio url. The duration [4,300] s

Click to upload or drag and drop

Supported formats: JPEG, PNG, WEBP, BMP, TIFF, GIF Maximum file size: 30MB; Maximum files: 1

Image URL. Only one image is supported. Aspect Ratio (Width/Height): [0.4,2.5]. Dimension (px): [300,6000]

Whether to enable the watermark. Default: true.

Output
output typevideo

README

Complete guide to using omnihuman-2-0

API OmniHuman 2.0 pour vidéos d'avatars parlants IA

Original image
FonctionnalitéAPI OmniHuman 1.5API OmniHuman 2.0
InputImage + Audio + Optional PromptImage + Audio + Optional Prompt
Audio-Driven AnimationSupportedSupported
Lip SyncSupportedSupported
Facial ExpressionsSupportedSupported
Body GesturesSupportedSupported
Multi-Person AnimationSupportedSupported
Text Prompt ControlSupportedSupported
Maximum Video DurationUnder 60 SecondsUp to 300 Seconds*
Output Resolution720p / 1080p720p*
Best ForShort, High-Resolution Avatar VideosLonger Talking Avatar Videos
OmniHuman 2.0 specifications may vary by API provider and endpoint.

L'API OmniHuman 2.0 est une API de génération de vidéos IA pilotée par l'audio, développée à partir du modèle OmniHuman 2.0 de ByteDance. Elle transforme des images de personnages et de l'audio en vidéos d'avatars parlants avec des mouvements de lèvres, des expressions faciales et des gestes synchronisés. Les développeurs peuvent intégrer l'API OmniHuman 2.0 via Kie AI pour créer des applications d'avatars IA et de création vidéo.

ByteDance OmniHuman 2.0 utilise une image de référence et un fichier audio pour générer des vidéos de personnages animés. Le modèle analyse la parole, le rythme et les signaux sonores pour créer des mouvements de lèvres, des expressions faciales et des gestes correspondants. Les développeurs peuvent également utiliser des prompts textuels optionnels pour guider les actions et les performances du personnage.

L'API OmniHuman 2.0 prend en charge les images JPEG, PNG, WebP, BMP, TIFF, GIF et HEIC jusqu'à 30 Mo, avec des dimensions comprises entre 300 et 6 000 pixels par côté. Les entrées audio prennent en charge les fichiers MP3 et WAV jusqu'à 15 Mo, avec des durées allant de 4 à 300 secondes. Pour connaître toutes les exigences d'entrée, consultez la documentation de l'API Kie AI.

L'API OmniHuman 2.0 prend en charge les vidéos de 4 à 300 secondes (5 minutes), la vidéo générée correspondant à la durée de l'audio d'entrée. Le modèle génère des vidéos en résolution 720p, ce qui le rend adapté aux longues vidéos d'avatars parlants, aux présentations et aux performances chantées. Pour connaître les limites spécifiques de chaque endpoint, consultez la documentation de l'API Kie AI.

Oui, l'API OmniHuman 2 prend en charge l'animation multi-personnages, permettant aux développeurs de créer des vidéos intégrant plusieurs personnages dans une seule scène. Cela la rend utile pour les interviews virtuelles, les podcasts IA et les performances de groupe. Les résultats peuvent dépendre de l'image de référence, de l'entrée audio et de la complexité de la scène.

L'API OmniHuman 2.0 prend en charge des vidéos plus longues, jusqu'à 300 secondes en 720p, ce qui en fait la solution idéale pour les vidéos longues d'avatars parlants et les performances de personnages. L'API OmniHuman 1.5 privilégie des vidéos plus courtes jusqu'à 60 secondes, avec la prise en charge de la résolution 1080p. Ces deux modèles offrent une animation pilotée par l'audio, la synchronisation labiale, des expressions faciales et une gestuelle. Kie AI donne accès à la fois à l'API OmniHuman 1.5 et à l'API OmniHuman 2.0, permettant aux développeurs de choisir le modèle le mieux adapté à leurs projets.

Oui. L'API OmniHuman AI prend en charge des prompts textuels optionnels pour guider les actions, la gestuelle et le style d'interprétation du personnage. Les développeurs peuvent combiner les prompts avec des images et de l'audio pour influencer l'animation générée. Les mouvements finaux dépendent également de l'audio et de l'interprétation du modèle.

Kie AI offre des crédits gratuits aux nouveaux utilisateurs pour démarrer avec l'API OmniHuman 2.0. Savoir si ces crédits suffiront à couvrir la génération de votre vidéo dépend de vos paramètres et du coût estimé en crédits. Vous pouvez vérifier les crédits requis avant de soumettre une demande de génération.