seedance-2-0 reference-to-video
doubao/seedance-2-0/reference-to-video
Seedance 2.0 的“参考生视频”功能是视觉统一的终极方案。它能精准提取参考素材的艺术风格、光影基调或构图意向,并将其完美融入新生成的视频中,确保您的系列创作拥有高度一致的视觉语言。
示例
参数
| 名称 | 类型 | 默认 | 约束 | 说明 |
|---|---|---|---|---|
| images图片组 | image_upload | — | image/* · 0–9 items | 生成视频的参考图片 |
| audios音频组 | audio_upload_group | — | audio/* · 0–3 items | 生成视频的参考音频 |
| prompt提示词 | textarea | — | — | 用于生成的正向提示词。 |
| generate_audio生成音频 | boolean | true | — | 控制生成的视频是否包含与画面同步的声音。 |
| resolution分辨率 | select | 720p | 480p | 720p | 1080p | 视频分辨率 |
| ratio画面比例 | select | adaptive | adaptive | 16:9 | 4:3 | 1:1 | 3:4 | 9:16 | 21:9 | 生成视频的宽高比例 |
| duration *视频时长 (秒) | select | 5 | -1 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | … | 生成视频时长,仅支持整数,单位:秒。 |
| return_last_frame返回生成视频的尾帧图像 | boolean | — | — | 是否返回生成视频的尾帧图像 |
| watermark添加水印 | boolean | false | — | 生成视频是否包含水印。 |
| seed随机种子 | number | -1 | -1 ~ 4294967295 | 种子整数,用于控制生成内容的随机性。 |
API
通过统一 REST API 调用本模型;在 API Keys 页获取密钥。
cURL
# 1) Submit — returns { "task_uuid": "..." }
curl -X POST "https://www.namifusion.com/api/v1/marketplace/run/doubao/seedance-2-0/reference-to-video" \
-H "Authorization: Bearer YOUR_API_KEY" \
-H "Content-Type: application/json" \
-d '{
"input": {
"images": [
"https://assets-public.namifusion.com/uploads/images/2026-04-10/a9489888297a.png",
"https://assets-public.namifusion.com/marketplace/images/2026-04-10/6abd3e6e8a4e.jpeg"
],
"prompt": "The puppy in @Image2 is running on the beach in @Image1.",
"generate_audio": true,
"resolution": "720p",
"ratio": "16:9",
"duration": 7,
"watermark": false,
"seed": -1
}
}'
# 2) Poll until status is "completed", then read the output URLs
curl "https://www.namifusion.com/api/v1/marketplace/run/tasks/TASK_UUID" \
-H "Authorization: Bearer YOUR_API_KEY"Python
import time, requests
API_KEY = "YOUR_API_KEY"
HEADERS = {"Authorization": f"Bearer {API_KEY}"}
# 1) Submit
resp = requests.post(
"https://www.namifusion.com/api/v1/marketplace/run/doubao/seedance-2-0/reference-to-video",
headers=HEADERS,
json={
"input": {
"images": [
"https://assets-public.namifusion.com/uploads/images/2026-04-10/a9489888297a.png",
"https://assets-public.namifusion.com/marketplace/images/2026-04-10/6abd3e6e8a4e.jpeg"
],
"prompt": "The puppy in @Image2 is running on the beach in @Image1.",
"generate_audio": True,
"resolution": "720p",
"ratio": "16:9",
"duration": 7,
"watermark": False,
"seed": -1
}
},
)
resp.raise_for_status() # 401/402/429/5xx stop here instead of polling a bad task
task = resp.json()
# 2) Poll until a terminal state (completed / failed / cancelled).
# This model is allowed up to 300s server-side.
deadline = time.time() + 360
while task.get("status") not in ("completed", "failed", "cancelled"):
if time.time() > deadline:
raise TimeoutError(f"still {task.get('status')} — keep the task_uuid and poll later")
time.sleep(3)
poll = requests.get(f"https://www.namifusion.com/api/v1/marketplace/run/tasks/{task['task_uuid']}", headers=HEADERS)
poll.raise_for_status()
task = poll.json()
print(task["status"], task.get("output"))JavaScript
const API_KEY = "YOUR_API_KEY";
const HEADERS = { Authorization: `Bearer ${API_KEY}` };
// 1) Submit
const resp = await fetch("https://www.namifusion.com/api/v1/marketplace/run/doubao/seedance-2-0/reference-to-video", {
method: "POST",
headers: { ...HEADERS, "Content-Type": "application/json" },
body: JSON.stringify({
"input": {
"images": [
"https://assets-public.namifusion.com/uploads/images/2026-04-10/a9489888297a.png",
"https://assets-public.namifusion.com/marketplace/images/2026-04-10/6abd3e6e8a4e.jpeg"
],
"prompt": "The puppy in @Image2 is running on the beach in @Image1.",
"generate_audio": true,
"resolution": "720p",
"ratio": "16:9",
"duration": 7,
"watermark": false,
"seed": -1
}
}),
});
if (!resp.ok) throw new Error(`submit failed: ${resp.status} ${await resp.text()}`);
let task = await resp.json();
// 2) Poll until a terminal state (completed / failed / cancelled).
// This model is allowed up to 300s server-side.
const deadline = Date.now() + 360 * 1000;
while (!["completed", "failed", "cancelled"].includes(task.status)) {
if (Date.now() > deadline) throw new Error(`still ${task.status} — keep the task_uuid and poll later`);
await new Promise((r) => setTimeout(r, 3000));
const poll = await fetch(`https://www.namifusion.com/api/v1/marketplace/run/tasks/${task.task_uuid}`, { headers: HEADERS });
if (!poll.ok) throw new Error(`poll failed: ${poll.status}`);
task = await poll.json();
}
console.log(task.status, task.output);文档
豆包-Seedance 2.0
“把影视公司塞进模型”:多模态融合下的精准视频创作。
Seedance 2.0 是字节跳动推出的新一代视频生成大模型,旨在定义“一人电影公司”的创作流。它不仅在画质上实现了飞跃,更凭借革命性的多模态参考系统,支持同时混合 12 个素材(图、影、音、文),让创作者能够以前所未有的精度控制角色一致性、镜头运动和节奏对齐。
🚀 核心亮点
- 多模态融合控制: 支持 9张图片+3段视频+3段音频(上限12个素材)同时输入,完美解决角色走样和动作跑偏难题。
- 原生 2K 电影画质: 支持 1080P 及 2K 原生分辨率,光影细节逼真,彻底告别“AI 塑料感”。
- 原生音画同步: 内置口型匹配与节奏感知,视频动作可随 BGM 节拍自动起伏,无需后期二次剪辑。
- 卓越物理感官: 模拟流体、重力和复杂人体动作,生成成功率高达 99.5%,动作极其流畅自然。
- 专业导演指令: 通过自然语言即可控制推拉摇移、景深虚化及光影转场。
🛠️ 技术参数
| 参数项目 | 详细说明 |
|---|---|
| 模型架构 | 多模态 Diffusion-Transformer (DiT) |
| 最大分辨率 | 2K (默认 1080P) |
| 视频时长 | 4 - 15 秒 |
| 画幅比例 | 16:9, 9:16, 4:3, 3:4, 21:9, 1:1 |
| 输入模态 | 文本、图片 (max 9)、视频 (max 3)、音频 (max 3) |
| 响应速度 | 约 30-90 秒生成单条视频 |
示例提示词
- 电影感描述: “雨夜城市街道,霓虹灯闪烁。穿黑风衣的男子撑红伞行走。镜头缓慢推进至面部特写。忧郁电影感,冷色调。”
- 精准控制: “以 @Image1 为角色,参考 @Video1 的镜头运动,配合 @Audio1 的节奏。”
💰 定价策略 (火山引擎 API)
| 服务类型 | 分辨率 | 价格 | 预估成本 |
|---|---|---|---|
| 视频生成 (文字/图片生视频) | 480p/720p | $7 / 1M Tokens | ~每秒 $0.15 |
| 视频生成 (视频生视频) | 480p/720p | $4.3 / 1M Tokens | ~每秒 $0.09 |
| 视频生成 (文字/图片生视频) | 1080p | $7.7 / 1M Tokens | ~每秒 $0.16 |
| 视频生成 (视频生视频) | 1080p | $4.7 / 1M Tokens | ~每秒 $0.1 |
💡 最佳应用场景
- 电商广告: 快速生成高质量的产品展示、模特试穿视频,降低拍摄成本。
- 短视频制作: 自动匹配 BGM 节奏生成 MV 或剧情短片,实现批量化创作。
- 影视预可视化: 导演可利用模型快速将剧本转化为动态分镜,验证视觉效果。
相关模型
VT 唇形同步
VT 唇形同步通过翻译后的视频、翻译后音频、翻译后字幕时间轴,以及原始视频和原始字幕时间轴,对翻译后的视频进行口型同步。
Kling Omni Video O3
Kling Omni Video O3 参考到视频模型可通过多个视角的角色、道具或场景参考生成创意视频。提取主体特征并创建新的视频内容,同时保持帧间身份一致性。支持音频生成。即用型 REST API,性能最佳,无冷启动,价格实惠。
Kling Omni Video O3
Kling Omni Video O3 参考到视频模型可通过多个视角的角色、道具或场景参考生成创意视频。提取主体特征并创建新的视频内容,同时保持帧间身份一致性。支持音频生成。即用型 REST API,性能最佳,无冷启动,价格实惠。
Kling Omni Video O1 参考视频生成
Kling Omni Video O1 参考视频生成使用多个视角的角色、道具或场景参考来生成创意视频。它提取主体特征并在生成新视频内容的同时保持跨帧的身份一致性。提供即用型 REST API,最佳性能,无冷启动,价格实惠。
Kling Omni Video O1 参考视频生成
Kling Omni Video O1 参考视频生成使用多个视角的角色、道具或场景参考来生成创意视频。它提取主体特征并在生成新视频内容的同时保持跨帧的身份一致性。提供即用型 REST API,最佳性能,无冷启动,价格实惠。
Kling 3.0 Standard 动作控制
Kling 3.0 Standard 动作控制将参考视频中的动作转移到静态图片中进行动画化。上传角色图片和动作片段(舞蹈、动作、手势),模型提取动作生成流畅、逼真的视频。提供即用型 REST 推理 API,性能最佳,无冷启动,价格实惠。
Alibaba WAN 2.6
Alibaba WAN 2.6 Reference-to-Video 能够将角色、道具或场景的参考图(无论是单视角还是多视角)转化为全新的视频片段。它在保持物体特征、风格及布局高度一致的同时,确保了动作的流畅自然。我们提供现成的 REST 推理 API,具备极致性能与零冷启动特性,价格极具竞争力。