Animate 3D Motion 是阿里通义实验室XR实验室研发的一款AI角色动画模型,他可以实现用3D动画人物来替换真人跳舞动作。
项目地址:https://aigc3d.github.io/motionshop/
MotionShop框架由两部分构成,一个是用于提取修复背景视频序列的视频处理流程,另一个是用于生成3D虚拟角色视频序列的姿态估计和渲染流程,通过并行两条线并使用高性能光线追踪染器TIDE,整个视频替换过程可以在几分钟内完成。
使用教程:
目前该项目已经上架到modelscope,用户可以免费体验。
地址:https://modelscope.cn/studios/Damo_XR_Lab/motionshop/summary
第一步:上传一个包含完整人物的视频(请保证视频一镜到底且人物始终清晰完整,视频会自动截取前30秒);
第二步:选择视频中要替换的人物(暂时不支持手动选择,算法会自动选择画面中占比最大的人物);
第三步:选择要替换的虚拟角色模型并点击生成,等待10分钟即可生成结果(由于视频需要人工审核,00:00-08:00期间可能无法及时反馈,敬请谅解)。
数据统计
相关导航
暂无评论...