阶跃星辰开源全新 Step-Video-TI2V 图生视频模型,运动可控,动漫效果尤佳!

40次阅读
没有评论

阶跃星辰开源全新 Step-Video-TI2V 图生视频模型,运动可控,动漫效果尤佳!

登顶VBench评测榜

3月20日,阶跃星辰宣布开源图生视频模型Step-Video-TI2V

该模型是基于 30B 参数 Step-Video-T2V 训练的图生视频模型,支持生成102 帧、5 秒、540P 分辨率的视频,模型效果在图生视频领域权威基准测试VBench-I2V 中达到State-of-the-Art水平(即当前最先进的模型)。

该模型上线后已迅速与华为昇腾计算平台完成适配,目前在阶跃 AI 网页版、App 端和魔乐社区(Modelers)都可体验

根据阶跃星辰公众号介绍,Step-Video-TI2V 图生视频开源模型具备运动幅度可控镜头运动可控两大核心特点。

其运动幅度可控能力,能够平衡图生视频生成结果的动态性和稳定性,为创作者提供更为灵活的选择。在运镜方面,从基本的推拉摇移、升降,到各种复杂的电影级运镜效果都能驾驭。另外,Step-Video-TI2V 天生具备一定的特效生成能力,并可以自由选择多种图生视频的尺寸。在动漫类任务上,Step-Video-TI2V 的效果尤其突出,非常适合用于动画创作、短视频制作等应用场景。

在 VBench-I2V 基准测试中,Step-Video-TI2V 取得了 State-of-the-Art 级别的表现,综合性能问鼎榜首。

阶跃星辰开源全新 Step-Video-TI2V 图生视频模型,运动可控,动漫效果尤佳!

据了解,这是最近一个月阶跃星辰开源的第三款多模态大模型,此前阶跃星辰开源了Step-Video-T2V 文生视频模型和 Step-Audio 语音模型,两款均达到了State-of-the-Art级别,阿里云、火山引擎、天数智芯、LiblibAI、TCL等生态厂商均快速接入。开源图生视频模型,被视为阶跃星辰在多模态开源领域发挥生态影响力的又一动作。

版权所有,未经授权不得以任何形式转载及使用,违者必究。

Read More 

正文完
可以使用微信扫码关注公众号(ID:xzluomor)
post-qrcode
 
评论(没有评论)
Generated by Feedzy