2025-05-01 15:26:16 | 来源: AICG工具箱
?机器人舞蹈,大跳「机械舞」,但不是??波士顿动力的那种~??
机器人复刻迈克尔·杰克逊,竟然毫不逊色!?
这究竟是怎么回事?
原来,阿里又整出跳舞模型新活儿——全新的AI数字人像生成模型框架。新框架支持一键替换原视频当中的动态人物,并且完美还原原版舞蹈。
这款新模型名叫MotionShop,能够将识别的人像转换为3D影像,同时又不改变其他场景和人物。
我们再看一个,让漂亮的小姐姐教咱们的《原神》人气角色可莉扭腰姿。
让?小猪跟着师傅学打太极。
二次元虚拟偶像跳起了Kpop女团劲舞。
阿里新花活儿,目前支持免费体验。
看到这里,已经有人迫不及待打开了阿里的ModelScope魔搭社区试玩起来。不过确实承认,最近阿里的花活好多,手持国内最强算力就是有底气。
目前MotionShop支持在线生成,只需三步:
①上传视频
②框选视频当中需要替换的目标对象
③选择要替换的虚拟人物
实测后发现,需要注意以下几点:
首先上传的视频,尽量不要超过15秒,并且保证人物整体的完整性,而且不能存在断帧剪辑的情况。换句话说,原片素材需要一镜到底。
目前魔搭社区提供可替换的虚拟形象只有四款而已。
不过好在,这款模型后边还会继续升级体验,可玩性还会加强。最后就是比较漫长的排队等待时间,通常需要十来二十分钟。
MotionShop是如何实现视频生成的?
阿里人工智能研究团队提出了使用3D人物替换视频当中的角色的想法,可以将大大缩短视频内容转换的周期与效率。
整个内容生成转换框架由两部分组成:
①提取将人物抠图后,需要修复的视频背景进行处理
②将抠出来的人物生成3D动态影像所需要的静态帧
通过并行两条处理管线,再结合高性能的光线追踪渲染器工具,整个工作流结合下来,就可以将修复后的背景加入3D动态跳舞人物。
我们可以通过上边这个技术原理分解图,大致了解到,如何使得二次元人物临摹「科目三」舞蹈片,从而得到一段替换人物的跳舞视频。
阿里啊~阿里,这次彻底跟跳舞视频模型杠上了~!
感兴趣的家人们可以戳下方的地址进行体验:
https://modelscope.cn/studios/Damo_XR_Lab/motionshop/summary
热门榜单
美图设计室
常用AI醒图
常用AI万相营造
常用AICanva可画
常用AI即梦AI
常用AI秘塔AI搜索
常用AI猫箱
常用AI剪映
常用AI夸克
常用AI热门资讯
有什么方式可以运行stable diffusion_怎么用Docker容器运行 SD
01-24商汤全新AI绘图大模型“秒画Artist”v0.3.5版本上手测评:作画水平比肩Midjourney!划重点——免费
12-31WPS AI表格教程丨Excel办公软件函数公式怎么使用_WPS AI表格公式快速生成!
01-15stable diffusion初识_stable diffusion跟其他工具有什么区别]
01-17MJ怎么批量出图_怎么用MJ批量生图
01-27中文多模态大模型SuperCLUE-V榜单发布丨Stability AI推出Stable Fast 3D模型丨Meta AI向好莱坞明星采买声音授权
02-11微软推出首个AI天气预报系统Aurora,比传统的数值天气预报模型快5000倍
02-25Stability AI宣布全球裁员10%以应对财务困境:此前合伙人CEO与核心研发骨干已离职
04-15百度CEO李彦宏喊话:AI大模型开源意义不大,围绕文心一言可以打造最好的应用生态体验
04-17Meta进军室内AI-SceneScript丨将支持生成可编辑的3D模型!
04-17