阿里云最新视频生成大模型开放:1张图生成2分钟视频

近日,阿里云推出了一款全新视频生成大模型I2VGen-XL,并在魔搭社区开放体验。该模型能够将用户上传的一张图片在2分钟左右生成一段1280*720的高分辨率视频。据悉,未来该模型将进一步实现2K超清效果,适用于短视频内容生产、电影制作等场景。视频生成大模型的技术门槛较高,需要克服文本和视频内容匹配度、视频画面质量、画面连续性等诸多技术挑战。此前,阿里云和微软等科技公司相继推出了一系列可控视频生成研究成果,例如用户可通过定义空间布局、运动模式等条件来生成视频,但其画面清晰度难以满足真实场景应用的需求。目前,I2VGen-XL的模型和代码均已开源,国内外社交媒体上已出现了大量创意AI视频生成内容

近日,阿里云推出了一款全新视频生成大模型I2VGen-XL,并在魔搭社区开放体验。该模型能够将用户上传的一张图片在2分钟左右生成一段1280*720的高分辨率视频。据悉,未来该模型将进一步实现2K超清效果,适用于短视频内容生产、电影制作等场景。
视频生成大模型的技术门槛较高,需要克服文本和视频内容匹配度、视频画面质量、画面连续性等诸多技术挑战。此前,阿里云和微软等科技公司相继推出了一系列可控视频生成研究成果,例如用户可通过定义空间布局、运动模式等条件来生成视频,但其画面清晰度难以满足真实场景应用的需求。
目前,I2VGen-XL的模型和代码均已开源,国内外社交媒体上已出现了大量创意AI视频生成内容,例如在城堡上展翅的恐龙、宇航员在飞船中行走的科幻电影画面等等。阿里云在视觉生成领域已有丰富的经验,此前已推出AI绘画创作大模型通义万相(基座模型Composer)和可控视频生成模型VideoComposer。团队在该领域发表60多篇CCF-A类论文,并在国际顶级视觉竞赛中获得10余项冠军。

本文由Pcwolke转载于中关村在线,来源:https://news.zol.com.cn/831/8316735.html

相关链接:

原创文章,作者:Pc wolke小编,如若转载,请注明出处:http://shouji.wangguangwei.com/68146.html