Transfere movimentos humanos de um vídeo ou foto para um personagem 3D com rig do Adobe Mixamo e exporta um arquivo .glb com malha deformável.
blendi-remade/prompt2rig
Digite um prompt de texto e obtenha um personagem 3D rigado executando o movimento, com modelos de vídeo da fal, recuperação de pose com GVHMR e retargeting para Mixamo.
- Estrelas
- 3
- Forks
- 0
- Issues abertas
- 0
- Último commit
- há 12 horas
O que é?
O Prompt2Rig transforma uma descrição textual de movimento em um personagem rigado e animado no navegador. O prompt é enviado a um modelo de vídeo rápido na fal (MiniMax H3 Max Turbo ou FLUX 3 Max), o movimento humano no clipe gerado é recuperado com GVHMR em uma GPU NVIDIA local e o resultado é retargetado para um esqueleto do Mixamo.
Uma etapa leve do MediaPipe Pose é executada no navegador para oferecer uma prévia ao vivo imediata, enquanto a etapa de maior qualidade do GVHMR gera rotações das articulações em um corpo com proporções fixas. É possível exportar as tomadas como arquivos .glb com o clipe de animação, e um script do Blender executado sem interface renderiza as tomadas salvas em MP4.
O projeto inclui um servidor Node sem dependências, um modo de stream que encadeia clipes a partir do último quadro de cada um e um worker FastAPI para a etapa HQ. Os componentes GVHMR e SMPL-X têm termos de uso não comercial, portanto, a etapa HQ, como fornecida, não é adequada para uso comercial.
Recursos principais
- 01Gera um clipe de 5 segundos a partir de um prompt de texto usando modelos de vídeo da fal.
- 02Exibe no navegador uma prévia ao vivo da pose usando MediaPipe.
- 03Recupera o movimento com GVHMR e faz o retargeting para rigs do Mixamo.
- 04Exporta tomadas como arquivos .glb com o clipe de animação.
- 05O modo de stream encadeia clipes em uma única performance contínua.
- 06Renderiza as tomadas salvas sem interface usando o Blender.
Casos de uso
- Prototipar animações de personagens a partir de ideias em texto, sem precisar de uma configuração de mocap.
- Criar prévias de movimento para jogos ou cenas do three.js usando personagens do Mixamo.
- Exportar personagens animados em .glb para Blender, Unity ou three.js.
- Experimentar pipelines de vídeo para movimento com IA em uma GPU local.
Tópicos
Perguntas frequentes
- O que é prompt2rig?
- Digite um prompt de texto e obtenha um personagem 3D rigado executando o movimento, com modelos de vídeo da fal, recuperação de pose com GVHMR e retargeting para Mixamo. O Prompt2Rig transforma uma descrição textual de movimento em um personagem rigado e animado no navegador. O prompt é enviado a um modelo de vídeo rápido na fal (MiniMax H3 Max Turbo ou FLUX 3 Max), o movimento humano no clipe gerado é recuperado com GVHMR em uma GPU NVIDIA local e o resultado é retargetado para um esqueleto do Mixamo.
- prompt2rig é gratuito? Qual é a licença?
- prompt2rig é open source sob a licença Apache-2.0. Confira os termos da licença antes de usá-lo em produtos comerciais.
- prompt2rig ainda é mantido?
- Manutenção ativa. O último commit de prompt2rig foi em 19 de out. de 2026.
- Para que posso usar prompt2rig?
- Prototipar animações de personagens a partir de ideias em texto, sem precisar de uma configuração de mocap. Criar prévias de movimento para jogos ou cenas do three.js usando personagens do Mixamo. Exportar personagens animados em .glb para Blender, Unity ou three.js. Experimentar pipelines de vídeo para movimento com IA em uma GPU local.
- Onde consigo prompt2rig?
- O código-fonte e as instruções de instalação estão no GitHub: https://github.com/blendi-remade/prompt2rig
Resumo gerado por IA a partir do README do projeto. As estatísticas do GitHub são atualizadas diariamente.
Projetos relacionados
Estúdio de pré-visualização no navegador para bloquear cenas, posar personagens e montar movimentos de câmera, com envio dos planos a modelos de vídeo com IA.
GUI em grafo de nós, API e backend para executar modelos de difusão localmente e gerar imagens, vídeos, áudio e conteúdo 3D.
Sistema open source de produção de vídeos com agentes que transforma um assistente de programação com IA em um estúdio de vídeo com pipeline para pesquisa, roteiro, geração de recursos, edição e renderização.
Um kit de ferramentas de vídeo como código que permite a agentes de IA transformar vídeos virais em fluxos de trabalho editáveis e gerar variações.
Sistema gratuito e de código aberto de captura de movimento sem marcadores que grava vídeos com várias câmeras e reconstrói movimentos humanos em 3D.