Animate 3D Motion

Animate 3D Motion官网

阿里上线AI动画模型，一键将真人跳舞动作替换为3D动画人物动作

网站服务：音频视频，Animate3DMotion，MotionShop，modelscope，魔搭社区，模型，音频视频，Animate3DMotion，MotionShop。

Animate 3D Motion简介

上传一段视频，AI自动检测视频中的人物，并替换成3D卡通角色模型，生成有趣的AI视频。
Animate 3D Motion 是阿里通义实验室XR实验室研发的一款AI角色动画模型，他可以实现用3D动画人物来替换真人跳舞动作。
项目地址：https://aigc3d.github.io/motionshop/

MotionShop框架由两部分构成，一个是用于提取修复背景视频序列的视频处理流程，另一个是用于生成3D虚拟角序列的姿态估计和渲染流程，通过并行两条线并使用高性能光线追踪染器TIDE，整个视频替换过程可以在几分钟内完成。

使用教程：

目前该项目已经上架到modelscope，用户可以免费体验。
地址：https://modelscope.cn/studios/Damo_XR_Lab/motionshop/summary

第一步：上传一个包含完整人物的视频（请保证视频一镜到底且人物始终清晰完整，视频会自动截取前30秒）；
第二步：选择视频中要替换的人物（暂时不支持手动选择，算自动选择画面中占比最大的人物）；
第三步：选择要替换的虚拟角色模型并点击生成，等待10分钟即可生成结果（由于视频需要人工审核，00:00-08:00期间可能无法及时反馈，敬请谅解）。