Repolode
blendi-remade

blendi-remade/prompt2rig

텍스트 프롬프트를 입력하면 fal 비디오 모델, GVHMR 포즈 복원, Mixamo 리타게팅을 거쳐 해당 동작을 수행하는 리깅된 3D 캐릭터를 얻을 수 있습니다.

스타
3
포크
0
열린 이슈
0
마지막 커밋
13시간 전

어떤 프로젝트인가요?

Prompt2Rig는 동작을 텍스트로 설명하면 브라우저에서 애니메이션이 적용된 리깅 캐릭터로 변환합니다. 프롬프트를 fal의 고속 비디오 모델(MiniMax H3 Max Turbo 또는 FLUX 3 Max)에 전송하고, 생성된 클립의 사람 동작을 로컬 NVIDIA GPU에서 GVHMR로 복원한 뒤 Mixamo 스켈레톤에 리타게팅합니다.

브라우저에서는 경량 MediaPipe Pose 처리로 즉시 실시간 미리보기를 제공하고, 고품질 GVHMR 처리는 비율이 고정된 신체의 관절 회전을 생성합니다. 애니메이션 클립이 포함된 .glb 파일로 테이크를 내보낼 수 있으며, 헤드리스 Blender 스크립트로 저장된 테이크를 MP4로 렌더링할 수 있습니다.

프로젝트에는 의존성 없는 Node 서버, 각 클립의 마지막 프레임부터 다음 클립을 이어 붙이는 스트림 모드, HQ 처리를 위한 FastAPI 워커가 포함됩니다. GVHMR 및 SMPL-X 구성 요소에는 비상업적 이용 조건이 적용되므로, 제공된 상태 그대로는 HQ 경로를 상업적으로 사용할 수 없습니다.

핵심 기능

  • 01fal 비디오 모델을 통해 텍스트 프롬프트에서 5초 클립을 생성합니다.
  • 02MediaPipe를 사용해 브라우저에서 실시간 포즈 미리보기를 표시합니다.
  • 03GVHMR로 동작을 복원하고 Mixamo 리그에 리타게팅합니다.
  • 04애니메이션 클립이 포함된 .glb 파일로 테이크를 내보냅니다.
  • 05스트림 모드로 여러 클립을 하나의 연속된 동작으로 이어 붙입니다.
  • 06저장된 테이크를 헤드리스 Blender로 렌더링합니다.

활용 사례

  • 모캡 장비 없이 텍스트 아이디어를 바탕으로 캐릭터 애니메이션을 프로토타이핑합니다.
  • Mixamo 캐릭터를 사용해 게임이나 three.js 장면용 동작 미리보기를 만듭니다.
  • 애니메이션이 적용된 .glb 캐릭터를 Blender, Unity 또는 three.js용으로 내보냅니다.
  • 로컬 GPU에서 AI 비디오-투-모션 파이프라인을 실험합니다.

토픽

자주 묻는 질문

prompt2rig은(는) 무엇인가요?
텍스트 프롬프트를 입력하면 fal 비디오 모델, GVHMR 포즈 복원, Mixamo 리타게팅을 거쳐 해당 동작을 수행하는 리깅된 3D 캐릭터를 얻을 수 있습니다. Prompt2Rig는 동작을 텍스트로 설명하면 브라우저에서 애니메이션이 적용된 리깅 캐릭터로 변환합니다. 프롬프트를 fal의 고속 비디오 모델(MiniMax H3 Max Turbo 또는 FLUX 3 Max)에 전송하고, 생성된 클립의 사람 동작을 로컬 NVIDIA GPU에서 GVHMR로 복원한 뒤 Mixamo 스켈레톤에 리타게팅합니다.
prompt2rig은(는) 무료로 사용할 수 있나요? 라이선스는 무엇인가요?
prompt2rig은(는) Apache-2.0 라이선스의 오픈소스입니다. 상업용 제품에 사용하기 전에 라이선스 조건을 확인하세요.
prompt2rig은(는) 아직 유지보수되고 있나요?
활발히 유지보수 중. prompt2rig의 마지막 커밋은 2026년 10월 19일입니다.
prompt2rig은(는) 어디에 사용할 수 있나요?
모캡 장비 없이 텍스트 아이디어를 바탕으로 캐릭터 애니메이션을 프로토타이핑합니다. Mixamo 캐릭터를 사용해 게임이나 three.js 장면용 동작 미리보기를 만듭니다. 애니메이션이 적용된 .glb 캐릭터를 Blender, Unity 또는 three.js용으로 내보냅니다. 로컬 GPU에서 AI 비디오-투-모션 파이프라인을 실험합니다.
prompt2rig은(는) 어디서 받을 수 있나요?
소스 코드와 설치 방법은 GitHub에 있습니다: https://github.com/blendi-remade/prompt2rig

요약은 프로젝트 README를 바탕으로 AI가 작성했습니다. GitHub 통계는 매일 갱신됩니다.

관련 프로젝트