阶跃星辰 Step-Video-TI2V 图生视频模型开源:运动幅度和镜头运动可控

这里是AI贴吧网-AI资讯的硬核前线!我们24小时监测全球实验室动态,算法追踪巨头动向、代码解析学术突破,用最“硅基”视角解秘AI革命浪潮!

今年2月阶跃星辰开源了两款Step系列多模态大模型——Step-Video-T2V视频生成模型和Step-Audio语音模型,今天阶跃星辰继续开源图生视频模型——Step-Video-TI2V,一款基于30B参数Step-Video-T2V训练的图生视频模型,支持生成102帧、5秒、540P分辨率的视频,具备运动幅度可控和镜头运动可控两大核心特点,同时天生具备一定的特效生成能力。

阶跃星辰称,和目前已有开源图生视频模型相比,Step-Video-TI2V不仅在参数规模上对该领域的研究提供了更高的上限,其运动幅度可控能力,更是能够平衡图生视频生成结果的动态性和稳定性,为创作者提供更为灵活的选择。

与此同时,Step-Video-TI2V已完成与华为昇腾计算平台的适配,并在魔乐社区(Modelers)上线。

1AI附Step-Video-TI2V核心特点如下:

1、运动幅度可控:动态&稳定自由切换

Step-Video-TI2V支持控制视频的“运动幅度(motion)”,平衡图生视频内容的运动性和稳定性。无论是静态稳定画面,还是高动态动作场景,都能满足创作者需求。

2、多种运镜控制

除了对镜头内主体运动的控制,Step-Video-TI2V支持对多种运镜的理解,可以对生成视频中的镜头运动进行精准控制,生成大片级运镜效果。从基本的推拉摇移、升降,到各种复杂的电影级运镜效果都能驾驭。

3、动漫效果尤佳

Step-Video-TI2V在动漫类任务上的效果尤其优异,非常贴合动画创作、短视频制作等应用场景。

4、支持多尺寸生成

Step-Video-TI2V支持多种尺寸图生视频,无论是横屏的宽阔视野,竖屏的沉浸体验,还是方屏的经典复古,都能轻松驾驭。用户可以根据不同的创作需求和平台特性,自由选择图片尺寸,无需担心画面变形或比例失调的问题。

现在,Step-Video-TI2V模型已正式开源,阶跃AI网页版和App端均已上线。

此外,Step-Video-TI2V现在已初步具备一些特效生成能力,未来,阶跃星辰还将通过LoRA等技术,持续解锁模型的特效潜力。

模型及技术报告链接:

GitHub:

https://github.com/stepfun-ai/Step-Video-TI2V

Github-ComfyUI:

https://github.com/stepfun-ai/ComfyUI-StepVideo

技术报告:

https://arxiv.org/abs/2503.11251

想掌握最新AI隐藏技能?挖透巨头紧急下架产品的真相?点击【AI贴吧网-AI资讯】,深度解析+实战案例,智能刷新你的认知!

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注