Repolode
제출하기
Tencent-Hunyuan

Tencent-Hunyuan/Hy-Nomas

Hy-Nomas는 여러 차례의 텍스트 프롬프트와 카메라 입력으로 영상 세계를 생성하는 자유 형식 인터랙티브 월드 생성 모델입니다.

GitHub에서 보기
스타
521
포크
50
열린 이슈
1
마지막 커밋
그저께

어떤 프로젝트인가요?

Hy-Nomas는 Tencent Hunyuan의 영상 월드 생성 모델입니다. 사용자는 여러 차례에 걸친 텍스트 프롬프트나 카메라 궤적으로 생성된 세계를 조정할 수 있으며, 일관성을 유지하기 위해 지속적인 KV cache를 사용해 각 새 구간을 이전 구간에 이어 생성합니다.

이 저장소에는 학습, 추론, 인터랙티브 웹 데모, 데이터 어노테이션 코드가 포함되어 있습니다. 추론에는 4~8회의 디노이징 단계로 동작하는 distill된 DiT와 DCAE-V latent용 PixelUMM 디코더가 사용됩니다. 양자화된 INT8 체크포인트와 FP8 디코더를 사용하면 슬라이딩 윈도우 히스토리 및 CPU 오프로딩을 적용해 NVIDIA RTX 4090 한 대에서 추론할 수 있습니다.

사용자 지정 영상 데이터셋을 대상으로 한 LoRA 파인튜닝을 지원하며, 캡셔닝 도구를 사용해 로컬 영상에서 학습 데이터를 준비할 수 있습니다. SGLang, ComfyUI, WanGP용 커뮤니티 통합 기능도 제공하며, Diffusers 파이프라인 예제도 포함되어 있습니다.

핵심 기능

  • 01여러 차례에 걸친 텍스트 프롬프트를 바탕으로 구간별 영상 세계를 생성합니다.
  • 02텍스트와 함께 카메라 궤적을 제어 신호로 받습니다.
  • 03INT8 가중치와 FP8 디코딩을 사용해 RTX 4090 한 대에서 추론을 실행합니다.
  • 04여러 차례에 걸쳐 인터랙티브하게 탐색할 수 있는 웹 데모를 제공합니다.
  • 05사용자 지정 영상 데이터셋을 대상으로 한 LoRA 파인튜닝을 지원합니다.

활용 사례

  • 프롬프트로 조작하는 인터랙티브 영상 세계나 게임과 유사한 환경을 프로토타이핑합니다.
  • 특정 시각적 스타일이나 도메인에 맞춰 자체 영상 데이터셋으로 LoRA 어댑터를 파인튜닝합니다.
  • 카메라와 텍스트로 제어하는 자기회귀 영상 월드 모델을 연구합니다.
  • 제공된 LoRA 어댑터를 병합해 로보틱스 스타일 또는 영화 같은 장면을 생성합니다.

빠른 시작

  1. 1

    사전 패키징된 Docker 이미지를 가져옵니다

    docker pull hynomasoss/hynomasoss:cu130
  2. 2

    리포지토리 루트에서 컨테이너를 시작합니다

    docker run --rm -it --gpus all --ipc=host --network=host -v "$PWD:/workspace/Hy-Nomas" -w /workspace/Hy-Nomas hynomasoss/hynomasoss:cu130 bash
  3. 3

    Hugging Face에서 모델 가중치를 다운로드합니다

    hf download tencent/Hy-Nomas --local-dir /path/to/Hy-Nomas
  4. 4

    README의 추론 스크립트를 실행합니다(먼저 모델 경로와 프롬프트 파일을 설정하세요)

사용 전 알아둘 점

  • 호환되는 NVIDIA GPU와 CUDA 13.0이 설치된 Linux 호스트가 필요합니다. README에는 단일 RTX 4090에서의 추론이 설명되어 있습니다.
  • 모델 가중치와 attention kernel 빌드의 용량이 커서 설정에 상당한 시간이 걸릴 수 있습니다.
  • 메타데이터의 라이선스가 명확하지 않으므로(NOASSERTION), 상업적 사용 전에 LICENSE 파일을 확인하세요.

포함된 컬렉션

AI 영상 생성AI 영상·오디오 도구

토픽

#video-generation#world-model#diffusion#lora#text-to-video#camera-control

자주 묻는 질문

Hy-Nomas은(는) 무엇인가요?
Hy-Nomas는 여러 차례의 텍스트 프롬프트와 카메라 입력으로 영상 세계를 생성하는 자유 형식 인터랙티브 월드 생성 모델입니다. Hy-Nomas는 Tencent Hunyuan의 영상 월드 생성 모델입니다. 사용자는 여러 차례에 걸친 텍스트 프롬프트나 카메라 궤적으로 생성된 세계를 조정할 수 있으며, 일관성을 유지하기 위해 지속적인 KV cache를 사용해 각 새 구간을 이전 구간에 이어 생성합니다.
Hy-Nomas은(는) 무료로 사용할 수 있나요? 라이선스는 무엇인가요?
Hy-Nomas은(는) Other 라이선스의 오픈소스입니다. 상업용 제품에 사용하기 전에 라이선스 조건을 확인하세요.
Hy-Nomas은(는) 아직 유지보수되고 있나요?
활발히 유지보수 중. Hy-Nomas의 마지막 커밋은 2026년 11월 6일입니다.
Hy-Nomas은(는) 어디에 사용할 수 있나요?
프롬프트로 조작하는 인터랙티브 영상 세계나 게임과 유사한 환경을 프로토타이핑합니다. 특정 시각적 스타일이나 도메인에 맞춰 자체 영상 데이터셋으로 LoRA 어댑터를 파인튜닝합니다. 카메라와 텍스트로 제어하는 자기회귀 영상 월드 모델을 연구합니다. 제공된 LoRA 어댑터를 병합해 로보틱스 스타일 또는 영화 같은 장면을 생성합니다.
Hy-Nomas는 어떻게 설치하나요?
사전 패키징된 Docker 이미지를 가져옵니다: docker pull hynomasoss/hynomasoss:cu130 리포지토리 루트에서 컨테이너를 시작합니다: docker run --rm -it --gpus all --ipc=host --network=host -v "$PWD:/workspace/Hy-Nomas" -w /workspace/Hy-Nomas hynomasoss/hynomasoss:cu130 bash Hugging Face에서 모델 가중치를 다운로드합니다: hf download tencent/Hy-Nomas --local-dir /path/to/Hy-Nomas README의 추론 스크립트를 실행합니다(먼저 모델 경로와 프롬프트 파일을 설정하세요)
Hy-Nomas은(는) 어디서 받을 수 있나요?
소스 코드와 설치 방법은 GitHub에 있습니다: https://github.com/Tencent-Hunyuan/Hy-Nomas

요약은 프로젝트 README를 바탕으로 AI가 작성했습니다. GitHub 통계는 매일 갱신됩니다.

관련 프로젝트