输入文字提示,即可让带骨骼的 3D 角色表演对应动作,基于 fal 视频模型与 GVHMR 动作还原。
- Star
- 866
- Fork
- 116
- 未关闭 Issue
- 5
- 最近提交
- 昨天
这是什么?
RGB MoCap 是一款 Windows 桌面应用,可从普通视频中重建人体动作。它在本地 NVIDIA GPU 上运行 ExMR、FlowHMR、GVHMR、MAMMA 和 PromptHMR 等多个 AI 动作捕捉模型,并可在 3D 预览中检查结果后再导出。
重建完成后,应用提供脚与手掌的接触修正,并可编辑接触时间以减少滑步。动作可重定向到 Mixamo FBX、VRM 和 PMX 人形角色,导出为 FBX,或为 MMD 工作流导出 VMD。每个项目会分别保存各 AI 模型的结果。
安装通过脚本完成,模型文件由内置的 Model Manager 下载。部分模型需要注册账号并接受许可协议,全部模型占用的磁盘空间约为 60 多 GB。
核心功能
- 01可重建单人或多人动作,并预览人体网格与骨骼。
- 02通过可编辑的接触时间修正脚与手掌的滑动。
- 03将动作重定向到 Mixamo FBX、VRM 和 PMX 人形角色。
- 04可将动作导出为 FBX,或为 MMD 导出 VMD。
- 05通过 MAMMA 模型支持多机位动作捕捉。
适用场景
- 将参考视频转为动画,用于 Unity、Blender 或游戏角色。
- 利用 PMX 角色和 VMD 导出,从视频制作 MMD 舞蹈动作。
- 无需专业动捕棚,即可为动画工作制作动作原型。
- 在同一段视频上比较多个姿态估计模型的输出效果。
快速上手
- 1
安装 Git for Windows 并克隆仓库
git clone https://github.com/toyxyz/toyxyz_RGBMocap.git - 2
进入项目文件夹
cd toyxyz_RGBMocap - 3
准备运行环境和依赖
install.cmd - 4
启动应用并保持控制台窗口打开
RGBMoCap.cmd
使用前须知
- 仅支持 Windows,需要 64 位系统及兼容的 NVIDIA GPU,并支持 OpenGL 4.3。
- 已安装的模型和运行环境约需 63 GiB 磁盘空间。
- 部分 AI 模型文件需要注册账户并手动下载。
- 可选的 MAMMA 和 PromptHMR 运行环境需要 Visual Studio C++ 生成工具和 CUDA Toolkit 12.8。
收录于专题
标签
常见问题
- toyxyz_RGBMocap 是什么?
- 一款原生 Windows 应用,可将视频转换为可编辑的人体动作,本地运行 AI 姿态模型,并导出 FBX 或 VMD。 RGB MoCap 是一款 Windows 桌面应用,可从普通视频中重建人体动作。它在本地 NVIDIA GPU 上运行 ExMR、FlowHMR、GVHMR、MAMMA 和 PromptHMR 等多个 AI 动作捕捉模型,并可在 3D 预览中检查结果后再导出。
- toyxyz_RGBMocap 可以免费使用吗?用的什么许可证?
- toyxyz_RGBMocap 以 Other 许可证开源。用于商业产品前,请先确认许可证条款。
- toyxyz_RGBMocap 还在维护吗?
- 活跃维护中。toyxyz_RGBMocap 最近一次提交是在 2026年11月7日。
- toyxyz_RGBMocap 适合用来做什么?
- 将参考视频转为动画,用于 Unity、Blender 或游戏角色。 利用 PMX 角色和 VMD 导出,从视频制作 MMD 舞蹈动作。 无需专业动捕棚,即可为动画工作制作动作原型。 在同一段视频上比较多个姿态估计模型的输出效果。
- toyxyz_RGBMocap 怎么安装和运行?
- 安装 Git for Windows 并克隆仓库: git clone https://github.com/toyxyz/toyxyz_RGBMocap.git 进入项目文件夹: cd toyxyz_RGBMocap 准备运行环境和依赖: install.cmd 启动应用并保持控制台窗口打开: RGBMoCap.cmd
- 在哪里获取 toyxyz_RGBMocap?
- 源代码和安装说明在 GitHub 上:https://github.com/toyxyz/toyxyz_RGBMocap
概要由 AI 根据项目 README 生成;GitHub 数据每日更新。
相关项目
533+36 本周79JavaScriptApache-2.0更新于 18天前
将视频或照片中的人体动作迁移到 Mixamo 绑定的 3D 角色上,输出可用的 .glb 模型。
1934+109 本周244PythonApache-2.0更新于 15天前
开源免费的无标记动作捕捉系统,用多台相机采集视频并重建三维人体运动。
1.1万+104 本周1017TypeScriptAGPL-3.0更新于 前天
基于 DirectCompute 在任意 D3D11 GPU 上运行的 Windows 版 Whisper 语音识别实现。
1.1万+8 本周981C++MPL-2.0更新于 2个月前
跨平台 C++20 三维图形库,API 仿照 three.js,提供 OpenGL 与 Vulkan 渲染后端及 Python 绑定。
1212+36 本周156C++MIT维护活跃更新于 前天
FlowHMR 的官方实现,可从单目视频中重建物理上合理的三维人体动作。
292+23 本周21PythonApache-2.0更新于 6天前