Перейти к основному контенту

Talking Avatar API

spicyapi/talking-avatar-v1/talking-avatar

Talking Avatar превращает один портрет и голосовую запись на 3–60 секунд в MP4, где человек говорит с синхронизацией губ. Рот, движения головы и моргание следуют за звуком, а необязательная маска выбирает говорящего на групповом фото.

От $0.018/с

Рабочая область

Ввод

Говорящий аватар
38/1000
Необязательно. Пара слов о мимике или настроении: спокойно, весело, серьёзно. Человек и обстановка берутся из портрета, а не отсюда. Не более 1000 символов
1/1

Перетащите файл или ссылку на медиа, вставьте или выберите · 1 файл · Не более 10 МБ · JPG · PNG · WEBP

  • 1
Файлы: 1 / 1
Лицо, которое будет говорить. Один человек, смотрящий примерно в камеру, при ровном свете; лучше всего кадр по грудь. Не менее 1 символов
1/1

Перетащите аудиофайл или выберите файл на устройстве · 1 файл · Не более 90 МБ · MP3 · WAV

Файлы: 1 / 1
Речь для синхронизации губ, от 3 до 60 секунд, MP3 или WAV. Нужна прямая ссылка на сам аудиофайл; надёжнее всего его загрузить. Файлы вне этого диапазона отклоняются до какого-либо списания. Не менее 1 символов
0/1

Перетащите файл или ссылку на медиа, вставьте или выберите · 1 файл · Не более 10 МБ · JPG · PNG · WEBP

Файлы: 0 / 1
Необязательно. Нужна, только если на портрете несколько человек: чёрно-белое изображение того же размера, белое на том, кто должен говорить. Не менее 1 символов
Сид
Зафиксируйте, чтобы сравнить два запуска с тем же портретом и аудио; оставьте пустым, чтобы каждый раз получать новый вариант. Не меньше 0 · Не больше 2147483647
Фильтр безопасностиВыключен

SpicyAPI не применяет фильтр безопасности к этой модели. Промпт и материалы передаются модели без изменений, а результат определяет сама модель.

Проверяем аккаунт перед включением отправки и расчёта стоимости.

Вывод

Готово к запуску

Результат появится здесь.

Настройте ввод, проверьте стоимость и запустите модель.

Связанные модели и следующие шаги

Нужной модели нет?

Напишите, какую модель добавить и для чего она вам нужна. Запрос попадёт к тем, кто решает, что подключать дальше.

Один портрет и одна реплика — лицо её произносит

Отправьте фото человека и запись голоса — и получите видео, где это лицо произносит слова. Губы, лёгкие движения головы и моргание следуют за звуком; одежда, фон и кадр остаются как на портрете. Ролик длится ровно столько, сколько запись, — от 3 до 60 секунд.

Заставить портрет заговорить
Один портрет и одна реплика — лицо её произносит
Запрос
image_url и audio_url; prompt, mask_url и seed — опционально
Результат
640×352 из фото 16:9, 400×544 из портрета 3:4
Длительность
Ровно как у аудио, 3–60 с
Оплата
За секунду готового видео, минимум 3 секунды
Что отправляете
Портрет и аудиофайлMP3 или WAV, от 3 до 60 секунд. Короткая пометка о настроении — по желанию.
Что получаете
MP4 с вашим звукомОколо 0,2 мегапикселя, 25 кадров в секунду — под ленты и окна чатов, а не для полного экрана.
Сколько ждать
Около минутыСтолько заняла реплика длиной 4,5 секунды в наших тестах, от отправки до результата.

Для чего подходит Talking Avatar

  • Без съёмки, оборудования и таймлайна

    Фото, которое вам разрешено использовать, и записанный или синтезированный голос — вот и всё производство. Результат приходит одним MP4 с уже вшитым звуком.

  • Всем управляет звук

    Форма рта, движения головы и моргание следуют за записью. Пара слов в prompt — спокойно, бодро, серьёзно — смещает выражение лица; личность и обстановка берутся с фото.

  • На фото несколько человек?

    Закрасьте говорящего белым на чёрной маске размером с портрет и передайте её как mask_url — тогда заговорит нужное лицо.

  • Сравнимые повторы

    Зафиксируйте seed, чтобы сравнить два запуска с тем же портретом и звуком; не указывайте его, чтобы каждый раз получать новый дубль.

Кому нужен Talking Avatar

  • Ролики с ведущим без съёмки

    Образование и продуктовые команды

    Ролики с ведущим без съёмки

    Дайте лицо вступлению к курсу, объяснению продукта или новостному апдейту — с портретом, на который у вас есть права, и записанным или синтезированным голосом.

  • Персонажи, которые отвечают

    Приложения-компаньоны и персонажи

    Персонажи, которые отвечают

    Один портрет персонажа и новый аудиофайл на каждый ответ: одно и то же лицо произносит каждую реплику в камеру.

  • Один ведущий — много языков

    Команды локализации

    Один ведущий — много языков

    Оставьте тот же портрет и подставляйте дублированную запись для каждого рынка; между версиями меняется только звук.

Как вызвать Talking Avatar

  1. Выберите чёткий портрет

    Одно лицо, примерно в камеру, ровный свет, без рук и волос перед лицом. Кадр по плечи даёт рту больше всего пикселей.

  2. Запишите или выгрузите реплику

    Чистая речь от 3 до 60 секунд, MP3 или WAV. Музыка под голосом или несколько голосов одновременно делают движение губ менее точным.

  3. Отправьте оба файла и опрашивайте

    Создайте задачу с image_url и audio_url, опрашивайте её до завершения и скачайте видео. Надёжнее всего загрузить аудиофайл.

Реальные результаты наших тестов

  • Портрет на террасе, короткое приветствие

    Фото 1280×720 и произнесённая реплика на 4,5 секунды; промпт задал только настроение. Примерно через минуту после отправки вернулся ролик 640×352 с голосом. Включите звук.

    {
      "image_url": "https://cdn.spicyapi.ai/models/effects/inputs/c01-terrace-woman.webp",
      "audio_url": "https://cdn.spicyapi.ai/models/examples/inputs/67934a5ecc7b6624.wav",
      "prompt": "a warm, relaxed delivery to the camera"
    }
    Исходник
    Портрет на террасе, короткое приветствие — Исходник
    Результат

Вопросы о Talking Avatar

Место в цепочке

Talking Avatar начинает со статичного кадра. Если видео уже есть и нужно поменять только слова, берите Lip Sync. Чтобы подложить под результат атмосферу или эффекты, прогоните беззвучную версию сцены через Video Sound Effects.