开源不断!这次是沪研图生视频模型,运动可控,动漫效果尤佳!
创始人
2025-03-21 11:44:58
0

开源的风,在上海继续呼啸。

这一次,依旧是本土初创大模型公司、位列大模型“六小强”之一的阶跃星辰。此次开源的是图生视频模型Step-Video-TI2V,支持生成102帧、5秒、540P分辨率的视频,具备运动幅度可控和镜头运动可控两大核心特点,同时天生具备一定的特效生成能力。

此次开源亦是一场“赴约”——在2025全球开发者先锋大会(GDC)上,阶跃星辰就“官宣”要在3月开源自主研发的图生视频模型,进一步推动多模态AI技术的开放生态。新民晚报记者了解到,这是最近一个月阶跃星辰开源的第三款多模态大模型;此前阶跃星辰开源了Step-Video-T2V文生视频模型和Step-Audio语音模型,两款均达到了State-of-the-Art级别(即在某一领域或任务中表现最佳的模型),阿里云、火山引擎、天数智芯、LiblibAI、TCL等生态厂商均快速接入。

开源图生视频模型,被视为阶跃星辰在多模态开源领域发挥生态影响力的又一动作。据介绍,此次开源的Step-Video-TI2V主要针对图生视频任务做了两大关键优化:其一是引入图像条件,提高一致性;其二则是引入运动幅度控制,赋予用户更高自由度

Step-Video-TI2V主要针对图生视频任务做了两大关键优化。

阶跃星辰方面介绍,Step-Video-TI2V支持控制视频的“运动幅度”,平衡图生视频内容的运动性和稳定性。无论是静态稳定画面,还是高动态动作场景,都能满足创作者需求;除了对镜头内主体运动的控制,Step-Video-TI2V还支持对多种运镜的理解,从基本的推拉摇移、升降,到各种复杂的电影级运镜效果都能驾驭,生成大片级运镜效果。

此外,Step-Video-TI2V支持多种尺寸图生视频,无论是横屏的宽阔视野,竖屏的沉浸体验,还是方屏的经典复古,都能轻松驾驭。用户可以根据不同的创作需求和平台特性,自由选择图片尺寸,无需担心画面变形或比例失调的问题。

值得一提的是,Step-Video-TI2V在动漫类任务上的效果尤其优异,非常贴合动画创作、短视频制作等应用场景。

在VBench-I2V基准测试中,Step-Video-TI2V取得了State-of-the-Art级别的表现。

记者还获悉,该模型上线后已迅速与华为昇腾计算平台完成适配,并在VBench-I2V基准测试中,取得了State-of-the-Art级别的表现,综合性能问鼎榜首。

相关内容

“AI+”行动提速 锻造更...
猪一咳嗽,就能自动定位到具体的围栏,饲养员会收到提示去现场看。同时...
2025-03-22 11:42:00
女人是由糖,香精还有很多美...
女人是由糖,香精还有很多美味的东西做成的出自哪个动漫这个是鹅妈妈童...
2025-03-22 08:38:41
对一大学生来说,有什么好的...
对一大学生来说,有什么好的8分钟以内的演讲视频可以推荐看看,想学习...
2025-03-22 06:17:31
如何制作抗疫宣传视频
如何制作抗疫宣传视频制作抗疫宣传视频:首先明确主题是抗疫,抗击疫情...
2025-03-22 01:07:47
生态跳岛作用
生态跳岛作用1、对水质进行净化。利用生态跳岛本身的面积乎森告来抑制...
2025-03-21 22:37:38
奉贤菜花节开幕 268元体...
“文旅商体展”与农业的深度融合,又会呈现出怎样的美好呢?春和景明,...
2025-03-21 22:02:23

热门资讯

王家大院现在的所有者还是王家的... 王家大院现在的所有者还是王家的后人吗?我说的是山西灵石的王家大院...现在不知道是被收为国,还是仍为...
写字好看的女生有什么优势 写字好看的女生有什么优势见字如见人,字好看 很加分的。学校有书法比赛时很吃香哦感觉没有打字快的女生有...
我家办白事,朋友给我发红包,我... 我家办白事,朋友给我发红包,我该怎么说感谢话我家办白事,朋友给我发红包,我该怎么说感谢话当家里有事情...
杨大勇的妻子是谁 杨大勇的妻子是谁杨大勇的妻子是一位名叫王小丽的女性。据悉,王小丽与杨大勇相识于大学时期,两人相恋多年...
小猿众包骗局 小猿众包骗局小猿众包是小猿旗下的可以在家做题赚钱的兼职,平时如果时间充裕的情况下可以做做小猿众包挣个...
顶级绝伦推理片100部介绍 顶级绝伦推理片100部介绍 《白夜追凶》;可以说是刑侦国剧天花板了,逻辑,叙事方式,主演演技,这些几...
女生说男生丑萌什么意思? 女生说男生丑萌什么意思?丑萌就是又丑又萌,意思是男生在她的审美里不是好看的那种,但是又很戳她萌点就是...
八仙过海 各显神通,猜三个数字 八仙过海 各显神通,猜三个数字8,3,4解意:八仙即数字8,过海(也有唐僧向西天取经过海中有三人保护...
自从和女朋友确定关系后,女朋友... 自从和女朋友确定关系后,女朋友为什么每天晚上发视频要我给她讲故事哄她睡觉?每次给她讲一个小时她都不睡...
一个女生。让我去找她玩。是什么... 一个女生。让我去找她玩。是什么意思呢?求解。她是对你有好感的,不然也不会邀请你去找她玩。有可能把你当...