Vchitect/VBench

어떤 프로젝트인가요?

핵심 기능

• 01주체 일관성, 움직임의 부드러움, 미적 품질 등 16개 차원에서 텍스트-비디오 모델을 평가합니다.
• 02각 차원에 표준 프롬프트 모음과 자동 평가 방법을 제공합니다.
• 03선택한 차원에서 사용자 지정 비디오와 프롬프트의 점수를 매길 수 있습니다.
• 04VBench++ 구성 요소에 이미지-비디오, 장편 비디오, 신뢰성 평가 모듈이 포함되어 있습니다.
• 05pip으로 설치할 수 있으며 `vbench` CLI와 멀티 GPU 평가를 지원합니다.

활용 사례

• 공통 벤치마크를 기준으로 다양한 오픈 또는 상용 비디오 생성 모델의 결과물 품질을 비교합니다.
• 결과를 공개하기 전에 자체 비디오 생성 모델을 표준 차원에 따라 평가합니다.
• 연구 파이프라인에서 생성된 클립의 시간적 일관성과 움직임 품질을 측정합니다.
• 신뢰성 모듈을 사용해 비디오 생성 모델의 공정성, 편향 또는 안전성을 평가합니다.

빠른 시작

1. 1

   PyPI에서 vbench 패키지를 설치합니다(README의 PyPI 배지 참조).

2. 2

   README의 Usage 섹션에 따라 생성한 동영상을 평가합니다.

사용 전 알아둘 점

• !VBench++의 일부 모듈은 이름에 'beta'가 포함된 폴더에 있으므로 핵심 스위트보다 안정성이 낮을 수 있습니다.

토픽

자주 묻는 질문

VBench은(는) 무엇인가요?

텍스트-비디오 및 이미지-비디오 생성 모델을 다양한 품질·의미 차원에서 점수화하는 벤치마크 모음이자 평가 툴킷입니다. VBench는 비디오 생성 모델 평가를 위한 벤치마크 모음입니다. 주체와 배경의 일관성, 시간에 따른 깜빡임, 움직임의 부드러움, 미적·영상 품질, 객체 클래스, 사람의 행동, 공간적 관계 등 여러 평가 차원으로 비디오 생성 품질을 세분화합니다. 각 차원에는 표준 프롬프트 모음과 자동 평가 방법이 포함되어 있어, 같은 테스트 사례를 기준으로 여러 모델을 비교할 수 있습니다.

VBench은(는) 무료로 사용할 수 있나요? 라이선스는 무엇인가요?

VBench은(는) Apache-2.0 라이선스의 오픈소스입니다. 상업용 제품에 사용하기 전에 라이선스 조건을 확인하세요.

VBench은(는) 아직 유지보수되고 있나요?

6개월 이내 업데이트. VBench의 마지막 커밋은 2026년 8월 21일입니다.

VBench은(는) 어디에 사용할 수 있나요?

공통 벤치마크를 기준으로 다양한 오픈 또는 상용 비디오 생성 모델의 결과물 품질을 비교합니다. 결과를 공개하기 전에 자체 비디오 생성 모델을 표준 차원에 따라 평가합니다. 연구 파이프라인에서 생성된 클립의 시간적 일관성과 움직임 품질을 측정합니다. 신뢰성 모듈을 사용해 비디오 생성 모델의 공정성, 편향 또는 안전성을 평가합니다.

VBench는 어떻게 설치하나요?

PyPI에서 vbench 패키지를 설치합니다(README의 PyPI 배지 참조). README의 Usage 섹션에 따라 생성한 동영상을 평가합니다.

VBench은(는) 어디서 받을 수 있나요?

소스 코드와 설치 방법은 GitHub에 있습니다: https://github.com/Vchitect/VBench