2025-04-25 15:45:23 | 来源: AICG工具箱
3 月 7 日消息,阿里巴巴研究团队近日推出了 AtomoVideo 高保真图生视频(I2V,Image to Video)框架,旨在从静态图像生成高质量的视频内容,并与各种文生图(T2I)模型兼容。
3 月 7 日消息,阿里巴巴研究团队近日推出了 AtomoVideo 高保真图生视频(I2V,Image to Video)框架,旨在从静态图像生成高质量的视频内容,并与各种文生图(T2I)模型兼容。
总结 AtomoVideo 特性如下:
高保真度:生成的视频与输入图像在细节与风格上保持高度一致性
运动一致性:视频动作流畅,确保时间上的一致性,不会出现突兀的跳转
视频帧预测:通过迭代预测后续帧的方式,支持长视频序列的生成
兼容性:与现有的多种文生图(T2I)模型兼容
高语义可控性:能够根据用户的特定需求生成定制化的视频内容
▲图源 AtomoVIdeo团队论文
AtomoVideo 使用预先训练好的 T2I 模型为基础,在每个空间卷积层和注意力层之后新添加一维时空卷积和注意力模块,T2I 模型参数固定,只训练添加的时空层。由于输入的串联图像信息仅由 VAE 编码,代表的是低层次信息,有助于增强视频相对于输入图像的保真度。同时,团队还以 Cross-Attention 的形式注入高级图像语义,以实现更高的图像语义可控性。
目前,该团队只发布了 AtomoVideo 的论文及演示视频,并未提供在线体验地址。同时官方开设了 GitHub 账户,但仅用作官方网站托管,并未上传任何相关代码。
热门榜单
万相营造
常用AIFacet
常用AI星火绘镜
常用AI讯飞绘文
常用AILunit,ai癌症筛查工具
常用AICanva AI图像生成
常用AIMagicStudio
常用AIClipDrop
常用AIIconGen
常用AI热门资讯
全网沸腾!AI大模型「开源之王」Llama 3正式发布:性能比肩GPT-4
04-15快手发布文生视频大模型「可灵」丨广东高考首次启用AI智能巡考丨支付宝推出AI毛发自测工具
02-25英伟达CEO黄仁勋:人形机器人将逐渐成为主流,售价将在1万-2万美元之间
04-15波士顿动力最新电驱版Atlas机器人,完美复刻《午夜凶铃》贞子女鬼经典动作
04-15国产AI创业公司Kimi Chat凭200万字上下文窗口「长文本」大火,但前景可能跟淄博相似
04-18ChatGPT年度更新曝光:免费用户升级GPT-4丨华为Pura 70修复「AI消除衣服」BUG丨商汤日日新5.0官网上线
04-14科大讯飞4月26日发布讯飞星火V3.5春季更新丨阿里云全面支持Llama 3训练推理丨腾讯是中国AI发明专利企业最多的企业
04-15金山发布WPS 365办公套件,打造ToB企业全场景一站式AI办公工作流新模式
04-17有什么方式可以运行stable diffusion_怎么用Docker容器运行 SD
01-24MJ怎么批量出图_怎么用MJ批量生图
01-27