Seedance 2.0 и 2.5: как сравнить модели через API
Сравнение Seedance 2.0 и 2.5 имеет смысл только на одинаковом наборе задач. Возьмите два точных ID, seedance-2.0 и seedance-2.5, один сценарий, одинаковые параметры там, где их принимают обе модели, и заранее описанные критерии. Не объявляйте победителя по одному удачному ролику. Сначала проверьте доступные модели в каталоге, затем создайте одинаковые задачи через API и сохраните результаты для просмотра.
Коротко
Закрепите ID
seedance-2.0иseedance-2.5в журнале теста.Меняйте один фактор за раз: сцену, длительность, размер или модель.
Оценивайте все результаты серии, включая брак, и учитывайте фактический расход.
Seedance 2.0 и 2.5: что известно о различиях
Каталог подтверждает наличие двух моделей и протокол видео. Из номера 2.5 нельзя вывести преимущество в качестве, звуке, скорости или точности движения: для такого вывода нужны результаты на одинаковых заданиях. Ниже описан способ сравнения, без выдуманного победителя. В конфиге набора задач и в имени файла результата сохраните полные ID: seedance-2.0 и seedance-2.5. Не заменяйте их похожими строками из интерфейса. Карточка модели в каталоге видео показывает, какие варианты доступны на момент запуска.
Перед тестом составьте лист параметров: текст промпта, длительность, размер, дата запуска, ID задачи и путь к сохранённому файлу. Если модель не принимает выбранную комбинацию, это тоже результат. Не подбирайте тайно разные параметры, чтобы один ролик выглядел эффектнее. Проверьте допустимые значения по руководствам моделей, затем найдите общие настройки. Карточка каталога подтверждает ID и цену, но не заменяет описание всех параметров.
Как составить набор одинаковых сцен
Три сцены дают больше информации, чем один красивый пример. Первая проверяет сохранение объекта: «жёлтая чашка на белом столе, камера неподвижна». Вторая проверяет движение: «велосипедист едет слева направо по пустой дорожке, боковой план». Третья проверяет ограничения: «в кадре только красный воздушный шар, без текста и логотипов». Это не рейтинг моделей, а проверка конкретных требований.
Для каждой сцены заранее запишите, что считать принятым. В первой чашка должна остаться жёлтой, стол должен остаться белым. Во второй движение идёт в указанном направлении. В третьей не появляется лишний текст. Добавьте критерий технической пригодности: файл скачивается и воспроизводится. Без этих правил команда легко заменит оценку впечатлением после просмотра.
Не заставляйте одну модель повторять задачу до удачного кадра, пока второй дали одну попытку. Если допускаете повтор, задайте равное число попыток и сохраните все результаты. Иначе сравнение будет измерять бюджет и терпение оператора, а не поведение моделей.
Как отправить одну сцену двум моделям
Отправляйте запросы отдельно и сохраняйте каждый ответ под своим именем. В примере задана seedance-2.0; затем замените модель на seedance-2.5 в request.py и пересоздайте request.json. Это две генерации с отдельными результатами и расходом.
Обе версии Seedance подчиняются ограничению нового аккаунта: видео закрыто до оплаченных пополнений на $10. При 402 new_account_limit смена версии не поможет. Приветственный бонус в порог не входит. Проверьте способы и условия пополнения на странице цен и в кабинете.
Подготовьте переменные RELAY_API_KEY и VIDEO_SECONDS. Вторая задаёт длительность из руководств обеих моделей; ограничение шлюза 1-600 секунд не подтверждает поддержку всех этих значений моделью. Сохраните код в request.py, выполните python3 request.py, затем отправьте полученный JSON командой curl. Размер не задаётся, чтобы не подставлять неподтверждённое значение.
import json
import os
from pathlib import Path
seconds = int(os.environ["VIDEO_SECONDS"])
if not 1 <= seconds <= 600:
raise ValueError("VIDEO_SECONDS должен быть целым числом от 1 до 600")
body = {
"model": "seedance-2.0",
"prompt": "Жёлтая чашка на белом столе, неподвижная камера, мягкий дневной свет, без текста и логотипов.",
"duration_seconds": seconds,
}
Path("request.json").write_text(json.dumps(body, ensure_ascii=False), encoding="utf-8")curl --fail-with-body https://relay-llm.ru/v1/videos \
-H "Authorization: Bearer $RELAY_API_KEY" \
-H "Content-Type: application/json" \
--data-binary @request.json \
--output video.json --write-out '%{http_code}\n'Если обе модели приняли длительность, проверьте фактическую длину файлов после загрузки. Сравнивайте полный ролик, а не выбранный стоп-кадр: нарушение формы предмета или направления движения может появиться в середине. Не меняйте промпт после просмотра одного результата до запуска второй модели.
Как читать статус и сохранять результат
У POST /v1/videos два формата ответа. При 200 декодируйте data[0].b64_json, ID задачи здесь нет. При 202 сохраните id асинхронной задачи. Запрашивайте GET /v1/videos/JOB_ID с тем же ключом, пока статус не станет completed или failed. При completed скачайте файл через GET /v1/videos/JOB_ID/content. Схема запроса и состояния описана в документации видео. Опрос статуса не создаёт новую генерацию, а повторный POST создаёт новую работу.
Сохраняйте файл с понятным именем, например cup-seedance-2.0-attempt-1.mp4, и рядом сохраните JSON с ID задачи и параметрами. Не полагайтесь на вкладку браузера: доступ к файлу заканчивается в expires_at. Если задача завершилась failed, сохраните её ошибку и не вычёркивайте её из журнала сравнения.
Как оценить качество без общего рейтинга
Посмотрите ролики в случайном порядке, если это возможно. Для каждой сцены отметьте только заранее заданные признаки: предмет, движение, камера, лишние объекты, текст, техническая пригодность. Отдельно запишите замечания, которые не вошли в шкалу. Так у команды останется и численный результат по своему сценарию, и объяснение решения.
Не переносите вывод на все задачи. Модель, которая аккуратно держит неподвижный предмет, может дать иной результат на сложной смене планов. Если вашему продукту нужна динамика камеры, добавьте именно такую сцену и не делайте вывод из чашки на столе. Для этой задачи выбирайте модель, которая прошла проверку при приемлемом расходе.
Как сравнить расход и выбрать модель
Стоимость одной секунды и другие актуальные параметры смотрите в каталоге и на странице цен до запуска. После каждого задания проверьте журнал запросов: он связывает модель, время и фактический расход. В таблице теста держите количество созданных задач, количество принятых роликов и замечания по каждой сцене.
Считайте расход на принятый результат, а не цену первой попытки. Если одна модель требует больше повторов по вашему критерию, это увидит журнал. Не выдумывайте усреднённые цифры из нескольких роликов для рекламного вывода. Внутренний тест полезнее, когда он честно показывает условия и материалы.
Записывайте отказ по параметрам отдельно от брака готового видео. 400 требует проверить JSON и допустимость полей, 402 new_account_limit указывает на порог пополнений, а 429 требует паузы по Retry-After. Эти ответы не показывают художественного качества версии. Не отправляйте заведомо неверные платные задания ради заполнения сравнительной таблицы.
За задачу failed по документации Relay деньги не списываются. Готовый ролик с неверным цветом предмета остаётся выполненной генерацией. В итог серии включите фактический расход на все такие ролики, даже если в монтаж вошёл только один. Так выбор версии учитывает цену результата, который вы действительно можете использовать.
Можно ли сравнить Seedance 2.0 и 2.5 по одному промпту?
Можно сделать пробу, но вывод лучше не переносить на другие сценарии. Используйте несколько сцен с заранее заданными критериями.
Почему нельзя менять промпт между моделями?
Тогда неясно, что повлияло на результат: модель или другое описание. Меняйте один фактор за раз.
Что делать со статусом failed?
Сохраните ID и ошибку в журнале теста. Не создавайте повтор сразу, пока не проверили существующую задачу и её причину.
Где увидеть актуальную цену?
В каталоге и на странице цен. Перед серией генераций проверьте карточки обеих моделей.