SkyReels用于从文字、图片、视频和音频参考生成带声音的视频。创作者可以直接做文生视频或图生视频,也可以在Omni Reference中指定人物、场景、风格、关键帧、动作和声音参考,让多个镜头围绕同一组素材继续发展;现有视频还可用于动作迁移、主体或背景替换、局部修改和续写。除了网页创作工作室,SkyReels还提供API平台,便于开发团队把视频生成、数字人和编辑能力接入自己的产品。
用多模态参考共同约束画面动作与声音
SkyReels V4的Omni Reference把图片、视频和音频放进同一套生成请求中。图片可承担主体、场景、风格或关键帧参考,视频可提供动作与镜头节奏,音频则可用于音色或原视频声音;提示词通过标签指定每份素材的用途。对于连续叙事和角色镜头,这种工作方式比每个镜头只写提示词更容易保留人物与故事线索。
原生声音随视频画面同步生成
标准模式可以在生成画面的同时加入声音效果,官网将音画同步作为V4的核心创作方式。用户无需先生成无声片段再转到另一套工具补环境声;使用视频参考时,结果还可以沿用参考视频中的音频。Fast模式当前不提供同步音画输出,选择模型模式时需要留意这项边界。
首帧中间帧和尾帧控制镜头进程
图生视频接口既支持首帧与尾帧,也允许加入带时间点的中间参考帧,单次最多可配置六张中间帧。创作者可把关键动作节点分布在片段的不同时刻,再用提示词描述镜头如何从一个状态过渡到下一个状态,适合需要明确起止构图或连续动作节拍的镜头。
参考视频驱动动作替换与局部编辑
Omni Reference可将一段视频作为动作参考,再用图片替换其中的表演主体或视觉元素。官方示例覆盖人物动作模仿、主体替换、背景替换、物体移除、物体插入和服装局部修改;这些操作仍通过提示词和带标签的素材完成,不需要逐帧绘制遮罩。参考视频还可切换为续写类型,把原片段向后延展。
文生视频与图生视频覆盖常用画幅
V4提供独立的文生视频和图生视频入口,支持横屏、竖屏、方形及4比3、3比4画幅,并提供480p、720p和1080p输出选项。单次生成时长可在3至15秒之间设置,提示词优化器会在请求中默认启用,用户也可以根据自己的提示词控制需求关闭它。
多人物数字人与口型功能可独立调用
开发文档把数字人能力拆成单人数字人、多人数字人、分段镜头运动和口型同步等接口。它们适合用一张人物图与音频生成讲述、对话或表演片段,也能根据项目需要单独调用口型或镜头功能,不必把全部步骤固定在同一模板中。
视频重绘与续写补充现有素材
除V4的参考视频编辑外,API还保留视频风格重绘、视频续写以及单镜头和切镜头续写能力。团队可以从已有片段出发调整视觉风格、延长剧情动作,或为镜头切换选择专门的续写方式,让生成结果服务于后续剪辑,而不局限于从空白提示词开始。
异步API适合接入批量生成流程
开发者登录API平台后创建密钥,通过任务提交接口发送提示词、参考素材和分辨率等参数,服务端返回任务ID。应用随后查询任务状态,成功后取得视频地址、时长与分辨率信息。文生视频、图生视频和Omni Reference分别提供提交与查询端点,便于产品按输入类型组织界面和任务队列。
从参考素材到一个可用视频片段
- 进入网页工作室:从SkyReels官网打开Creative Studio并登录账号,在视频生成或Omni Reference之间选择入口。
- 确定生成方式:只有文字时使用文生视频;已有起始画面时使用图生视频;需要控制人物、动作、风格或声音时选择多模态参考。
- 上传并标记素材:添加图片、视频或音频参考,在提示词中使用对应标签说明主体、场景或动作关系。
- 设置输出参数:选择画幅、时长、分辨率、Fast或Std模式,并根据需要开启声音与提示词优化。
- 生成并检查片段:提交任务后在创作历史中查看结果,重点核对人物一致性、动作承接、音画关系和镜头过渡。
叙事广告数字人和开发集成的具体用法
连续角色短片:用人物图片固定主体,再加入场景和动作参考,生成同一角色在多个情节节点中的片段。
商品与品牌广告:上传产品图和风格参考,通过关键帧安排产品出现时机,并选择适合投放渠道的横屏或竖屏画幅。
动作迁移与视觉改版:以已有视频提供表演节奏,将主体、服装或背景替换为新的素材,保留原片的动作关系。
双人对话数字人:调用多人数字人或口型同步能力,把人物图片与录制音频组合成对话或解说镜头。
视频产品API:在自有网站或应用中创建生成任务,凭任务ID轮询状态,再把返回的视频地址接入素材库和审核流程。
用户评价与讨论
暂无评价,来发表第一条评价吧。