Infinitalk
infinitalk / from-audio

InfiniteTalk API — это продвинутый API для видео с синхронизацией губ на основе ИИ, разработанный MeiGen-AI. Он превращает портретное изображение и аудиодорожку в естественные видео с говорящими аватарами, обеспечивая точную синхронизацию губ и выразительную мимику.

Pricing: Infinitalk: 3 credits/s (~$0.015) for 480P, 12 credits/s (~$0.06) for 720P, up to 15 seconds per generation. High-tier top-ups (+10% bonus) bring effective pricing down to ~$0.014/s (480P) and ~$0.055/s (720P).
Input

Click to upload or drag and drop

Supported formats: JPEG, PNG, WEBP Maximum file size: 10MB

URL of the input image. If the input image does not match the chosen aspect ratio, it is resized and center cropped.

Click to upload or drag and drop

Supported formats: MPEG, WAV, X-WAV, AAC, MP4, OGG Maximum file size: 10MB

Audio duration must not exceed 15 seconds.

The text prompt to guide video generation.

0/5000

Resolution of the video to generate. Must be either 480p or 720p.

Random seed for reproducibility. Valid range is 10000 to 1000000.

A configurable parameter. Defaults to true in the Playground.

There is no guarantee that everything can be filtered out; if you are not satisfied with the results, you will need to make your own arrangements.
Output
output typevideo
Examples

Explore different use cases and parameter configurations

README

Complete guide to using infinitalk/from-audio

InfiniteTalk AI: API для генерации видео с синхронизацией губ

Original image
4.8/ 5
46,210 ratings
Tap a star to rate

InfiniteTalk API предназначен для создания реалистичных видео с синхронизацией губ. Он позволяет разработчикам превращать портретное изображение и аудиофайл, используя текстовый промпт, в видео с говорящими аватарами благодаря передовой технологии синхронизации губ. InfiniteTalk API создан на базе MeiGen-InfiniteTalk и подходит для образования, маркетинга и развлечений.

InfiniteTalk API для видео с синхронизацией губ использует фреймворк дубляжа на основе разреженных кадров для синхронизации губ, движений головы и мимики с аудио.

Да. С Kie.ai можно тестировать InfiniteTalk API онлайн без локального развёртывания: загрузите изображение и аудиофайл, добавьте промпт — платформа создаст видео с синхронизацией губ. Новые пользователи получают 80 бесплатных кредитов, а каждый запуск расходует кредиты по ставкам, указанным в карточке с тарифами.

InfiniteTalk API принимает одно портретное изображение (JPEG, PNG или WebP, до 10MB), один аудиофайл (MP3, WAV, AAC, аудио MP4 или OGG, до 10MB) и текстовый промпт длиной до 5 000 символов, а возвращает видео с синхронизацией губ в 480p (по умолчанию) или 720p.

InfiniteTalk тарифицируется за секунду готового видео: 3 кредита в секунду при 480p (~0,015 $) и 12 кредитов в секунду при 720p (~0,06 $), поэтому 15-секундное видео 720p стоит 180 кредитов (~0,90 $). Тарифы могут меняться; в карточке с тарифами вверху страницы всегда указана актуальная ставка.

Да. InfiniteTalk AI API можно использовать не только для речи, но и для пения. Объединяя изображение с аудиодорожкой песни, InfiniteTalk API для видео с синхронизацией губ создаёт аватаров, которые выглядят так, будто поют в такт музыке, — идеально для музыкальных клипов, развлечений и креативного контента в соцсетях.

Да. С Kie.ai можно бесплатно тестировать InfiniteTalk API онлайн через простой веб-интерфейс — программирование и локальная настройка не требуются.

В настоящее время InfiniteTalk на Kie.ai поддерживает создание видео длительностью до 15 секунд на одну задачу. Более длительные видео пока не поддерживаются. Мы можем изменить это ограничение по мере дальнейшего улучшения модели.

Да. MeiGen-AI публикует InfiniteTalk по лицензии Apache 2.0; код размещён на GitHub (github.com/MeiGen-AI/InfiniteTalk), а веса — на Hugging Face (MeiGen-AI/InfiniteTalk). Модель с открытым исходным кодом поддерживает видео неограниченной длительности; на Kie.ai она вызывается через API, с ограничением до 15 секунд на одну задачу.

Зарегистрируйтесь на Kie.ai и создайте ключ на странице API-ключей (kie.ai/api-key), затем передавайте его в каждом запросе в заголовке Authorization: Bearer YOUR_API_KEY. Вызовите POST https://api.kie.ai/api/v1/jobs/createTask, указав model как infinitalk/from-audio и передав input с параметрами image_url, audio_url и prompt (параметры resolution и seed необязательны). В ответе возвращается taskId: передайте callBackUrl, чтобы получить уведомление о завершении задачи, или опрашивайте GET /api/v1/jobs/recordInfo?taskId=…. Описание всех параметров приведено в документации InfiniteTalk API.