Перейти к основному контенту

Seedance 2.0 reference-to-video от ByteDance строит план из ваших материалов: до 9 изображений, 3 видеоклипов и 3 аудиодорожек, без первого кадра. Выдача 4–15 секунд в 480p, 720p, 1080p или 4K с нативным звуком.

От $0.043/с

Рабочая область

Ввод

Видео по референсу

При перестановке номера в промпте обновляются. При удалении материала удаляются и ссылки на него — проверьте промпт.

Обязателен, и здесь он же занимается кастингом. Референсы цитируются в порядке отправки, поэтому назовите, какое изображение — какой персонаж, что вносит каждый клип и зачем нужно аудио. Задания мы не проверяем; там, где формулировку отклоняет собственный слой Seedance, до цели по-прежнему доводит первый кадр в image-to-video.
Заполните хотя бы одно из полейУсловие выполнено
2/9

Перетащите файл или ссылку на медиа, вставьте или выберите · До 9 файлов · Не более 10 МБ · JPG · PNG · WEBP · GIF

  • @Image1
  • @Image2
Файлы: 2 / 9
До 9 референсных изображений, чтобы удержать персонажа, стиль или обстановку. Два-три ракурса одного персонажа обычно работают лучше стопки почти одинаковых кадров. У этого эндпоинта нет полей первого и последнего кадра: референсный и кадровый режимы взаимоисключающие, поэтому переходите на image-to-video, когда стартовый кадр должен быть точным. Собственная проверка входных данных Seedance может отклонить референсное фото или клип, где видно лицо реального узнаваемого человека. Каждая сторона должна быть от 300 до 6000 пикселей; изображения меньшего размера отсекает входная проверка, и списания при этом не происходит. Не более 9 элементов
влияет на цену0/3

Перетащите видео или выберите файл на устройстве · До 3 файлов · Не более 90 МБ · MP4 · WEBM

Файлы: 0 / 3
До 3 референсных клипов, каждый от 2 до 15 секунд, суммарной длиной не более 15 секунд, дающих движение, темп или язык камеры. Длина референсного клипа идёт в оплачиваемое количество — не как переключение ступени, а как линейный множитель того же рода, что `duration_seconds`, — поэтому обрезайте до тех секунд, которые действительно цитируете. Не более 3 элементов
0/3

Перетащите аудиофайл или выберите файл на устройстве · До 3 файлов · Не более 90 МБ · MP3 · WAV

Файлы: 0 / 3
До 3 референсных аудиофайлов, каждый от 2 до 15 секунд, суммарной длиной не более 15 секунд: они дают модели звуковую опору — подачу, темп, музыкальную фразу, — к которой подстраиваются движение и точки склейки. Не путайте с `generate_audio`: это вход, а будет ли у готового клипа дорожка, по-прежнему решает `generate_audio`. Не более 3 элементов
По умолчанию `adaptive`: модель находит кадр, вмещающий всех субъектов из референсов, и это особенно важно, когда референсы не совпадают по форме. Фиксированное соотношение задавайте только под жёсткое требование доставки — например, `9:16` для вертикальной ленты — и проверьте, что никто и ничто из референсов не обрезано. На тарификацию не влияет.
влияет на цену
480p, 720p, 1080p или 4k, по умолчанию 720p. Напрямую влияет на оплачиваемое количество. Задаёт только выходную ступень и не сделает низкокачественные референсы резче. Проверьте на низкой ступени, сочетаются ли референсы, и поднимайте её ради финального дубля. Ступеней апскейла и улучшения здесь нет.
Длительностьвлияет на цену
От 4 до 15 секунд, по умолчанию 5; при -1 длину выбирает модель (оценка по максимуму в 15 секунд, списание по фактической длине). Пятнадцать секунд — потолок этого поколения; ради более длинного одиночного плана переходите на эндпоинт линейки 2.5. Учтите: это и длина ваших референсных клипов — два независимых вклада в оплачиваемое количество, поэтому максимум по обоим и делает один запрос дорогим. Не меньше 4 · Не больше 15
Генерировать аудиовлияет на цену
По умолчанию включён. Даёт родную дорожку, синхронную картинке. Даже если вы прислали `reference_audio_urls`, выключение означает, что дорожки не будет: референсное аудио задаёт темп и подачу, но это не выходной трек. Выключайте, когда монтаж озвучат на постпродакшене.
Фильтр безопасностиВыключен

SpicyAPI не применяет фильтр безопасности к этой модели. Промпт и материалы передаются модели без изменений, а результат определяет сама модель.

Проверяем аккаунт перед включением отправки и расчёта стоимости.

Вывод

Готово к запуску
Пример результата

Связанные модели и следующие шаги

Нужной модели нет?

Напишите, какую модель добавить и для чего она вам нужна. Запрос попадёт к тем, кто решает, что подключать дальше.

Дайте нескольким утверждённым материалам разные роли в одной сцене

Эндпоинт reference-to-video у Seedance 2.0 — тот единственный, что принимает сразу несколько типов материала в одном вызове: до 9 изображений в reference_image_urls, 3 клипа в reference_video_urls и 3 дорожки в reference_audio_urls. prompt обязателен, как и хотя бы одно из reference_image_urls или reference_video_urls, поскольку одного лишь аудио для отправки запроса недостаточно. Основная работа — в промпте: он должен объяснять, за что отвечает каждый переданный материал.

Открыть песочницу
Дайте нескольким утверждённым материалам разные роли в одной сцене
Обязательный вход
prompt, плюс reference_image_urls или reference_video_urls
Лимиты референсов
до 9 изображений, 3 видеоклипов, 3 аудиодорожек
Длина референс-клипа
2-15 секунд на клип, 15 секунд суммарно на тип
Длительность
4-15 секунд, либо -1 для умной длительности
Разрешение
480p / 720p / 1080p / 4k, по умолчанию 720p
Чего здесь нет
Нет image_url / last_image_url — они относятся к image-to-video
Несколько массивов, несколько материалов
Каждый тип референса принимает больше одной ссылкиreference_image_urls и reference_video_urls — это массивы, поэтому одна генерация может опираться сразу на несколько изображений и несколько клипов. Ни у одного из двух других эндпоинтов этого семейства в схеме вообще нет поля-массива.
Роли не назначены
Схема не подписывает, за что отвечает каждый массивНичто на входе не заставляет одно изображение означать внешность, а другое — обстановку. Это разделение труда приходится прописывать прямо в промпте, явно ссылаясь на каждый переданный материал.
Единственный здесь эндпоинт с несколькими материалами
У text-to-video и image-to-video нет референсных массивовЭто эндпоинт, построенный для объединения нескольких утверждённых источников в одном кадре. image-to-video работает со статичными изображениями в двух фиксированных ролях — начальный кадр и необязательный конечный, — а text-to-video работает только со словами. Ни одному из них нельзя передать набор референсов на согласование.

В чём силён Seedance 2.0

Три канала референсов в одном вызове

Три канала референсов в одном вызове

Референсы изображения, видео и аудио идут вместе в одном запросе, поэтому сцена может взять внешний вид с одного материала, а темп — с другого, не сводя их предварительно за пределами API. ByteDance описывает Seedance 2.0 как принимающую до 9 изображений, 3 видеоклипов и 3 аудиоклипов наряду с текстовой инструкцией — именно это и открывает данный эндпоинт.

Работает с неполным набором

Работает с неполным набором

reference_audio_urls действительно необязателен, а схема через ограничение anyOf требует хотя бы одно из reference_image_urls или reference_video_urls. Передавайте ровно то, что сцене реально нужно, и полностью пропускайте остальное вместо того, чтобы раздувать запрос.

  • Тот же потолок 4K и 15 секунд, что и у остального семейства

    resolution и duration_seconds поддерживают тот же диапазон, что и text-to-video с image-to-video, — вплоть до 4k и 15 секунд. Этот эндпоинт не урезан по возможностям только из-за того, что принимает больше типов входного материала, чем два других.

  • adaptive работает и здесь

    aspect_ratio по умолчанию здесь тоже adaptive, и на этом эндпоинте он ищет компоновку, вмещающую все объекты из референсов, что особенно важно, когда прикреплённые материалы приходят в разных пропорциях. Фиксируйте одну из шести заданных пропорций, когда формат сдачи уже известен, и проверьте, что ни один человек или продукт из референсов не оказался обрезан.

  • Референс-аудио и generate_audio — независимые настройки

    reference_audio_urls задаёт темп и подачу, которым следует нейросеть во время генерации; generate_audio, включённый по умолчанию, решает, будет ли у готового ролика вообще звуковая дорожка. Передача референс-аудио при отключённом generate_audio возвращает беззвучный ролик, который всё равно следует тайминг референса.

  • Естественно подходит для пересборки материалов

    Материалы, утверждённые на предыдущих проходах — например референс персонажа или клип локации из более ранней съёмки, — можно напрямую использовать повторно как референсы, вместо того чтобы генерировать их заново для каждого нового кадра в серии.

Кому нужен Seedance 2.0

  • Разделите внешность и движение между двумя источниками

    Персонаж плюс отдельный референс движения

    Разделите внешность и движение между двумя источниками

    Одно референсное изображение может закреплять внешность, а референсное видео — демонстрировать движение, которому должен следовать промпт: это позволяет утверждать, дорабатывать и заменять оба вклада независимо друг от друга в последовательных итерациях одного и того же кадра.

  • Пусть аудио и изображение выполняют разные задачи

    Референс голоса или звука в паре с визуальным якорем

    Пусть аудио и изображение выполняют разные задачи

    reference_audio_urls может задавать тон или темп, а reference_image_urls — фиксировать то, что на экране. Прописывайте обе роли в промпте явно, называя каждый материал по его позиции в массиве, чтобы нейросеть знала, какой из них за какую деталь отвечает.

  • Используйте повторно то, что уже прошло проверку, вместо генерации заново

    Пересборка утверждённых материалов из предыдущих проходов

    Используйте повторно то, что уже прошло проверку, вместо генерации заново

    Подача ранее утверждённого изображения или клипа обратно как референса сохраняет непрерывность без повторения уже проверенной работы, что особенно полезно в длинных проектах с повторяющимся составом персонажей или обстановкой.

  • Фиксируйте aspect_ratio, когда референсы не совпадают по пропорции

    Вертикальная или фиксированная по пропорции сдача со смешанными референсами

    Фиксируйте aspect_ratio, когда референсы не совпадают по пропорции

    adaptive стоит по умолчанию, но когда формат сдачи фиксирован, а референсы приходят в разных пропорциях, заранее заданная фиксированная пропорция избавляет от того, чтобы это несоответствие решала сама нейросеть.

Как работать с Seedance 2.0

  1. Опишите роль каждого материала, прежде чем его перечислять

    Называйте, за что должен отвечать каждый переданный референс — внешность, движение, звук, атмосферу, — прежде чем нейросети придётся угадывать по одному лишь порядку в массиве, поскольку схема не назначает роли автоматически.

  2. Не добавляйте референсы, которые ничего не решают

    Каждый лишний материал — это ещё один элемент, который нейросети нужно согласовать, поэтому прикрепляйте референсы, которые меняют результат, и отбрасывайте те, что просто повторяют уже показанное другим материалом.

  3. Начинайте с минимума, добавляйте по одному референсу

    Начните с единственного самого важного материала, убедитесь, что он держится в результате, и добавляйте второй референс только если сцена действительно в нём нуждается.

  4. Укажите, чей референс побеждает в спорной детали

    Два изображения могут расходиться в причёске, костюме или освещении, а схема никак не ранжирует элементы массива друг относительно друга. Назовите в промпте, какое из них главное, используя подписи image 1 и image 2, которые этот эндпоинт присваивает переданным материалам.

Разобранные примеры Seedance 2.0

  • Один референс персонажа, один референс атмосферы

    reference_image_urls несёт единственный утверждённый референс персонажа; reference_audio_urls несёт короткий образец фонового звука помещения, темпу и настроению которого должна соответствовать сцена.

    Keep the person's appearance and outfit exactly as shown in the reference image; match the quiet, echoing ambience of the reference audio while they walk slowly through an empty hallway
  • Два референсных изображения для непрерывности кадра

    Два элемента reference_image_urls — один для персонажа, один для локации — объединяются в единый новый кадр, помещающий обоих в одном плане.

    Place the character from the first reference image into the location shown in the second reference image, walking toward camera at a relaxed pace, natural daylight matching the location reference
  • Референс движения в паре со статичным изображением персонажа

    Один элемент reference_video_urls несёт движение камеры, один элемент reference_image_urls несёт персонажа, а промпт указывает, что делает каждый из них. Референс-клип сначала обрезается, поскольку его длина тарифицируется наряду с секундами результата.

    Follow the camera move of the reference video exactly, with the person from the reference image walking through a covered market at dusk, handheld feel, warm string lights overhead

Вопросы об API Seedance 2.0

Гибкость этого эндпоинта — это и его цена: схема никак не назначает смысл референс-массивам. Именно в промпте внешность, движение, звук и атмосфера привязываются к источникам, так что относитесь к нему как к листу распределения ролей, а не как к второстепенной детали, называя материалы так же, как их нумерует эндпоинт: image 1, video 1, audio 1. Обрезайте референс-клипы перед загрузкой, поскольку их секунды тарифицируются наряду с результатом, и добавляйте второй референс только после того, как первый доказал, что держится.

Все модели Seedance10

Похожие сравнения