Repolode
Enviar
blendi-remade

blendi-remade/prompt2rig

Escribe un prompt de texto y obtén un personaje 3D con rig que realiza ese movimiento, usando modelos de video de fal, recuperación de pose con GVHMR y retargeting a Mixamo.

Ver en GitHub
Estrellas
3
Forks
0
Issues abiertos
0
Último commit
hace 13 horas

¿Qué es?

Prompt2Rig convierte una descripción de texto de un movimiento en un personaje animado con rig, directamente en el navegador. El prompt se envía a un modelo de video rápido de fal (MiniMax H3 Max Turbo o FLUX 3 Max); el movimiento humano del clip generado se recupera con GVHMR en una GPU NVIDIA local y, después, se adapta a un esqueleto de Mixamo.

En el navegador se ejecuta una pasada ligera de MediaPipe Pose para ofrecer una vista previa en tiempo real inmediata, mientras que la pasada de mayor calidad de GVHMR genera rotaciones de articulaciones para un cuerpo de proporciones fijas. Las tomas se pueden exportar como archivos .glb con el clip de animación, y un script de Blender sin interfaz gráfica renderiza las tomas guardadas a MP4.

El proyecto incluye un servidor Node sin dependencias, un modo de transmisión que encadena clips a partir del último fotograma de cada uno y un worker de FastAPI para la pasada HQ. Los componentes GVHMR y SMPL-X tienen condiciones de uso no comercial, por lo que la ruta HQ, tal como se distribuye, no es apta para uso comercial.

Funciones clave

  • 01Genera un clip de 5 segundos a partir de un prompt de texto mediante modelos de video de fal.
  • 02Muestra una vista previa de la pose en tiempo real desde el navegador con MediaPipe.
  • 03Recupera el movimiento con GVHMR y lo adapta a rigs de Mixamo.
  • 04Exporta tomas como archivos .glb con el clip de animación.
  • 05El modo de transmisión encadena clips para crear una actuación continua.
  • 06Renderiza las tomas guardadas sin interfaz gráfica con Blender.

Casos de uso

  • Crear prototipos de animaciones de personajes a partir de ideas en texto, sin un sistema de captura de movimiento.
  • Crear movimientos de vista previa para juegos o escenas de three.js con personajes de Mixamo.
  • Exportar personajes animados en formato .glb para Blender, Unity o three.js.
  • Experimentar con pipelines de conversión de video a movimiento mediante IA en una GPU local.

Temas

#ai#motion-capture#3d-animation#text-to-video#threejs#pose-estimation#gpu

Preguntas frecuentes

¿Qué es prompt2rig?
Escribe un prompt de texto y obtén un personaje 3D con rig que realiza ese movimiento, usando modelos de video de fal, recuperación de pose con GVHMR y retargeting a Mixamo. Prompt2Rig convierte una descripción de texto de un movimiento en un personaje animado con rig, directamente en el navegador. El prompt se envía a un modelo de video rápido de fal (MiniMax H3 Max Turbo o FLUX 3 Max); el movimiento humano del clip generado se recupera con GVHMR en una GPU NVIDIA local y, después, se adapta a un esqueleto de Mixamo.
¿prompt2rig es gratuito? ¿Qué licencia tiene?
prompt2rig es open source bajo la licencia Apache-2.0. Revisa los términos de la licencia antes de usarlo en productos comerciales.
¿prompt2rig sigue mantenido?
Mantenimiento activo. El último commit de prompt2rig fue el 19 oct 2026.
¿Para qué puedo usar prompt2rig?
Crear prototipos de animaciones de personajes a partir de ideas en texto, sin un sistema de captura de movimiento. Crear movimientos de vista previa para juegos o escenas de three.js con personajes de Mixamo. Exportar personajes animados en formato .glb para Blender, Unity o three.js. Experimentar con pipelines de conversión de video a movimiento mediante IA en una GPU local.
¿Dónde consigo prompt2rig?
El código fuente y las instrucciones de instalación están en GitHub: https://github.com/blendi-remade/prompt2rig

Resumen generado por IA a partir del README del proyecto. Las estadísticas de GitHub se actualizan a diario.

Proyectos relacionados