Kuaishou
Kling 3.0
kling-3.0-omni/reference-to-video
快手新一代视频生成模型,支持多镜头叙事与音画同轮生成,运动表现物理可信,适合3-15秒电影感短片与角色一致性内容
价格
kling-3.0-omni/reference-to-video 每秒
定位简介
Kling 3.0 Omni 的参考生视频(reference-to-video)型号面向需要跨镜头保持角色与画面一致性的开发者。它在同一次生成中接受参考素材并输出写实视频,强调电影感与物理可信的运动表现,适合制作 3 至 15 秒的短篇叙事、品牌内容与对话驱动型片段,是构建短视频生成流水线时可选的视频生成能力之一。
核心亮点
- 参考驱动的一致性延续——以参考素材约束生成结果,在多个镜头之间延续同一角色与视觉风格,而非产出孤立片段。
- 音画同轮产出——声音与画面在同一次生成中完成,支持对话型内容的口型同步,减少音画分别对齐的工程环节。
- 运动表现与镜头可控——生成运动具备电影感与物理可信度,并提供镜头与运动控制手段,便于按分镜意图调整画面。
能力说明
参考素材生成视频:接受参考素材作为生成依据,输出写实短视频;开发者可用它把已有角色或画面设定延续到新片段中。
多镜头叙事:支持在多个镜头间保持视觉与叙事连续性,适合按分镜组织生成,减少逐镜头拼装的一致性损耗。
原生音频与口型同步:画面与声音同轮生成,可支撑对话驱动内容的音画同步,简化后期配音与对齐流程。
运动与镜头控制:提供运动与镜头层面的控制能力,生成的动态更贴近真实物理,便于按剧本意图塑造镜头感。
分辨率与时长:输出可支持较高分辨率,单段叙事时长约 3 至 15 秒,按输出秒数计费,适合短视频形态内容。
适用场景
- 品牌与营销团队制作角色一致的短片——以品牌角色参考素材为输入,批量产出多镜头营销短片,用于投放与社媒分发。
- 内容团队制作对话驱动型短视频——输入对话脚本与角色参考,得到口型同步、音画一体的片段,用于剧情类短视频或广告对白。
- 分镜创作者制作电影感叙事片段——用参考素材与镜头控制生成多镜头短片,产出可直接进入剪辑的素材,用于预告与故事短片。
- 开发者构建短视频生成流水线——将参考生视频能力接入自有应用,按秒计费的方式便于控制单条素材的生成成本。
限制与选型建议
该型号定位为短视频生成,单段时长约 3 至 15 秒,不适合长视频或连续剧集级叙事。原生音频支持的语言范围在公开资料中表述不一,涉及多语种配音时需先验证。公开来源多为第三方集成平台,能力细节可能随版本更新而变化,上线前建议以实际调用结果为准。若需要纯文本驱动生成,可考虑文本生视频型号;若需要以视频施加运动参考,则对应运动控制型号更合适。
提交生成任务
https://api.hiapi.ai/v1/tasks 请求头
Authorizationstring必填账号 API Key,所有请求必填。示例:Bearer YOUR_HIAPI_API_KEY。获取 API Key
Content-Typestring可选请求体固定按 JSON 解析;如携带,仅接受 application/json(可带 charset),其他取值返回 415。示例:application/json。
Idempotency-Keystring可选幂等键,最长 255 字节。同账户同键的重试只创建一次任务,重放返回首次 taskId。
网络超时或客户端自动重试时,同键只创建一次任务、不会重复扣费(幂等范围 = API Key 所属账户)。建议用业务侧唯一标识做键(如 "order-42");同键重放返回首次 taskId,键在首次提交 24 小时后过期。详细的场景矩阵见统一异步接口介绍页。
请求体
modelstring必填当前固定值:kling-3.0-omni/reference-to-video
routestring可选当前固定值:default
inputobject必填
kling-3.0-omni/reference-to-video 和线路 default 的业务参数对象,见下方参数表。
audioboolean可选默认值: false是否在生成视频的同时生成与画面同步的声音,布尔值,默认 false(不生成)。当添加了参考视频(video_urls)时不可用。
promptstring必填minLength 1maxLength 3072视频内容的文本描述。若需使用 elements 中定义的某个主体,请在提示词中以 @name 的形式引用该主体名称。
durationinteger可选默认值: 5min 3max 15输出视频的时长,单位为秒,取值范围 3-15,默认 5。
elementsarray可选maxItems 7
可复用的主体(Subjects)数组,最多 7 个。每个主体包含名称、简短描述和 2-4 张图片,可在 prompt 中以 @name 引用;各字段另有独立节点。
Array [ object ]
数组元素
namestring必填minLength 1主体名称,需唯一且不含空格,在 prompt 中以 @name 的形式引用。
descriptionstring必填minLength 1对该主体的简短描述。
element_input_urlsarray必填minItems 2maxItems 4同一主体的图片地址数组,需 2-4 张,格式为 JPG/PNG。
Array [ string ]
image_urlsarray必填minItems 1maxItems 7参考图地址数组,需 1-7 张;当同时添加参考视频时最多 4 张。参考图与主体(elements)合计不得超过 7 张(有参考视频时为 4 张)。格式为 JPG/PNG,单张不超过 50MB,分辨率至少 300 px。
Array [ string ]
resolutionstring可选默认值: "720p"输出视频的分辨率,默认 720p。
720p1080p4kvideo_urlsarray可选minItems 1maxItems 1可选的参考视频地址数组。格式为 MP4 或 MOV,不超过 200MB,时长 3-15.5 秒,宽高在 700-4553 px 之间,帧率 24-60 fps。添加参考视频后,原生音频(audio)与智能多镜头(prefer_multi_shots)不可用。
Array [ string ]
aspect_ratiostring可选默认值: "16:9"输出视频的宽高比,默认 16:9。
16:99:161:1prefer_multi_shotsboolean可选默认值: false是否让模型根据提示词自动规划多个镜头,布尔值,默认 false(不启用)。当添加了参考视频(video_urls)时不可用。
callbackobject可选
终态通知配置;为空则不回调,由调用方自行查询。详见下方回调说明。
创建任务时提供 callback.url,任务终态时 HiAPI 主动 POST 通知你的服务,可免去轮询。回调请求体与任务详情数据结构同构;签名校验、投递重试与幂等说明见统一异步接口介绍页的回调说明。
urlstring必填callback 存在时必填;任务终态后向该 URL 发起 POST,须为合法 http(s) URL。
whenstring可选默认值: "final"当前仅支持 final,即 success / fail 均回调。
finalstoragestring可选默认值: "temp"产物存储档位:temp(默认,保留约 7 天)或 persistent(长期保存,按大小计费)。余额不足或超出存储上限会静默降级为 temp;实际生效档位见任务详情响应。
temppersistent请求示例
# 提交异步任务,成功立即返回 taskId(不等待生成完成)
curl -X POST "https://api.hiapi.ai/v1/tasks" \
-H "Authorization: Bearer $HIAPI_API_KEY" \
-H "Content-Type: application/json" \
-d '{
"model": "kling-3.0-omni/reference-to-video",
"input": {
"audio": false,
"prompt": "…",
"duration": 5,
"image_urls": "…",
"resolution": "720p",
"aspect_ratio": "16:9",
"prefer_multi_shots": false
}
}' const res = await fetch("https://api.hiapi.ai/v1/tasks", {
method: "POST",
headers: {
Authorization: `Bearer ${process.env.HIAPI_API_KEY}`,
"Content-Type": "application/json",
},
body: JSON.stringify({
model: "kling-3.0-omni/reference-to-video",
input: {
"audio": false,
"prompt": "…",
"duration": 5,
"image_urls": "…",
"resolution": "720p",
"aspect_ratio": "16:9",
"prefer_multi_shots": false
}
}),
});
const task = await res.json();
// { code: 200, message: "success", data: { taskId } } import os, requests
res = requests.post(
"https://api.hiapi.ai/v1/tasks",
headers={"Authorization": f"Bearer {os.environ['HIAPI_API_KEY']}"},
json={
"model": "kling-3.0-omni/reference-to-video",
"input": {
"audio": false,
"prompt": "…",
"duration": 5,
"image_urls": "…",
"resolution": "720p",
"aspect_ratio": "16:9",
"prefer_multi_shots": false
}
},
)
print(res.json()) # { code, message, data: { taskId } } 200 OK
{
"code": 200,
"message": "success",
"data": {
"taskId": "tk-hiapi-01HZTQ8BX2N3GM3YFK4Z9D7VQR"
}
} 400 Bad Request
{
"code": 400,
"message": "invalid request",
"data": null,
"error_code": "INVALID_REQUEST"
} 获取任务详情
https://api.hiapi.ai/v1/tasks/:id 响应字段
taskIdstring必填任务 ID,前缀固定 tk-hiapi-。
modelstring必填解析后的模型全名。用 route 参数提交的任务返回 base@线路(如 gpt-image-2/text-to-image@ext);否则与创建时传入的模型名一致。
routestring可选仅当任务用显式 route 参数提交时出现,回显提交时的原值。
statusstring必填任务状态。
queued 已入队,尚未开始。
handling 处理中。
archiving 处理完成,产物准备中。
success 终态:完成,产物可用(返回 output)。
fail 终态:失败(返回 error)。
提交后按 status 判断:success 或 fail 为终态,其余为非终态,建议按 1~3 秒间隔轮询直至终态。成功终态后从 output[].url 下载产物,并在 expireAt 前完成下载或转存;需要长期保留时在创建任务时使用 storage: "persistent"。
creatednumber必填任务创建时间(Unix 秒)。
completednumber必填进入终态的 Unix 秒;非终态固定为 0。
outputarray可选
仅 status == success 时出现。产物列表,始终为数组,同一任务可能同时返回多个 type(如 video + first_frame)。
Array [ object ]
数组元素
urlstring必填资源 URL,可直接下载。
typestring必填当前可能值:video、image、audio、first_frame、last_frame、thumbnail,后续可能会扩展。
expireAtnumber必填资源可访问截止时间(Unix 秒);过期前请完成下载或转存。
errorobject可选
仅 status == fail 时出现。
codestring必填业务错误码。
messagestring必填错误描述。
响应示例
成功
{
"code": 200,
"message": "success",
"data": {
"taskId": "tk-hiapi-01HZTQ8BX2N3GM3YFK4Z9D7VQR",
"model": "happyhorse-1-0",
"status": "success",
"created": 1777282033,
"completed": 1777282099,
"output": [
{
"url": "https://cdn.hiapi.ai/tasks/.../video.mp4",
"type": "video",
"expireAt": 1777886899
}
]
}
} 处理中(非终态)
{
"code": 200,
"message": "success",
"data": {
"taskId": "tk-hiapi-...",
"model": "happyhorse-1-0",
"status": "archiving",
"created": 1777282033,
"completed": 0
}
} 失败
{
"code": 200,
"message": "success",
"data": {
"taskId": "tk-hiapi-...",
"model": "happyhorse-1-0",
"status": "fail",
"created": 1777282033,
"completed": 1777282099,
"error": {
"code": "TASK_FAILED",
"message": "task failed"
}
}
}