Repolode
Enviar
toyxyz

toyxyz/toyxyz_RGBMocap

Aplicativo nativo para Windows que transforma vídeos em movimentos humanos editáveis, executa modelos de pose com IA localmente e exporta em FBX ou VMD.

Alternativa open source a:Rokoko Vision

Ver no GitHub
Estrelas
866
Forks
116
Issues abertas
5
Último commit
ontem

O que é?

RGB MoCap é um aplicativo desktop para Windows que reconstrói movimentos humanos a partir de vídeos comuns. Ele executa localmente, em uma GPU NVIDIA, vários modelos de captura de movimento com IA (ExMR, FlowHMR, GVHMR, MAMMA e PromptHMR), para que você possa conferir o resultado em uma prévia 3D antes de exportá-lo.

Depois da reconstrução, o aplicativo oferece correção de contato dos pés e das palmas das mãos, com tempos de contato editáveis para reduzir o deslizamento. É possível retargetar o movimento para personagens humanoides Mixamo FBX, VRM e PMX e, em seguida, exportá-lo como FBX ou como VMD para fluxos de trabalho com MMD. Os projetos mantêm resultados separados para cada modelo de IA.

A configuração é feita por scripts (install.cmd, RGBMoCap.cmd) e pelo Model Manager, que permite baixar os pesos dos modelos. Alguns modelos exigem cadastro de conta e aceitação de licença, e o conjunto completo de modelos ocupa dezenas de gigabytes em disco.

Recursos principais

  • 01Reconstrói uma ou várias pessoas e exibe uma prévia da malha corporal e dos ossos.
  • 02Corrige o deslizamento no contato dos pés e das palmas das mãos, com tempos de contato editáveis.
  • 03Retargeta movimentos para personagens humanoides Mixamo FBX, VRM e PMX.
  • 04Exporta animações como FBX ou movimentos de personagens PMX como VMD para MMD.
  • 05Oferece suporte à captura com várias câmeras por meio do modelo MAMMA.

Casos de uso

  • Transformar vídeos de referência em animações para personagens de Unity, Blender ou jogos.
  • Criar movimentos de dança para MMD a partir de um vídeo, usando personagens PMX e exportação em VMD.
  • Prototipar captura de movimento para trabalhos de animação sem um estúdio dedicado de mocap.
  • Comparar os resultados de vários modelos de estimativa de pose no mesmo clipe.

Início rápido

  1. 1

    Instale o Git for Windows e clone o repositório

    git clone https://github.com/toyxyz/toyxyz_RGBMocap.git
  2. 2

    Acesse a pasta do projeto

    cd toyxyz_RGBMocap
  3. 3

    Prepare os runtimes e as dependências

    install.cmd
  4. 4

    Inicie o app e mantenha o console aberto

    RGBMoCap.cmd

Antes de usar

  • Somente para Windows: requer Windows de 64 bits e uma GPU NVIDIA compatível com OpenGL 4.3.
  • Os modelos e runtimes instalados precisam de cerca de 63 GiB de espaço em disco.
  • Alguns arquivos de modelos de IA exigem cadastro de conta e download manual.
  • Os runtimes opcionais MAMMA e PromptHMR precisam do Visual Studio C++ Build Tools e do CUDA Toolkit 12.8.

Em coleções

Aplicativos e utilitários para WindowsTreine e execute IA em GPUs

Tópicos

#motion-capture#pose-estimation#3d-animation#windows#fbx#smpl-x#gpu

Perguntas frequentes

O que é toyxyz_RGBMocap?
Aplicativo nativo para Windows que transforma vídeos em movimentos humanos editáveis, executa modelos de pose com IA localmente e exporta em FBX ou VMD. RGB MoCap é um aplicativo desktop para Windows que reconstrói movimentos humanos a partir de vídeos comuns. Ele executa localmente, em uma GPU NVIDIA, vários modelos de captura de movimento com IA (ExMR, FlowHMR, GVHMR, MAMMA e PromptHMR), para que você possa conferir o resultado em uma prévia 3D antes de exportá-lo.
toyxyz_RGBMocap é gratuito? Qual é a licença?
toyxyz_RGBMocap é open source sob a licença Other. Confira os termos da licença antes de usá-lo em produtos comerciais.
toyxyz_RGBMocap ainda é mantido?
Manutenção ativa. O último commit de toyxyz_RGBMocap foi em 7 de nov. de 2026.
Para que posso usar toyxyz_RGBMocap?
Transformar vídeos de referência em animações para personagens de Unity, Blender ou jogos. Criar movimentos de dança para MMD a partir de um vídeo, usando personagens PMX e exportação em VMD. Prototipar captura de movimento para trabalhos de animação sem um estúdio dedicado de mocap. Comparar os resultados de vários modelos de estimativa de pose no mesmo clipe.
Como instalar toyxyz_RGBMocap?
Instale o Git for Windows e clone o repositório: git clone https://github.com/toyxyz/toyxyz_RGBMocap.git Acesse a pasta do projeto: cd toyxyz_RGBMocap Prepare os runtimes e as dependências: install.cmd Inicie o app e mantenha o console aberto: RGBMoCap.cmd
Onde consigo toyxyz_RGBMocap?
O código-fonte e as instruções de instalação estão no GitHub: https://github.com/toyxyz/toyxyz_RGBMocap

Resumo gerado por IA a partir do README do projeto. As estatísticas do GitHub são atualizadas diariamente.

Projetos relacionados