위키득계정 ↗
기술

ChronoMagic-Bench

ChronoMagic-Bench기술
연구 공개
2024년
발표
NeurIPS Datasets and Benchmarks 2024
평가 문장
1649개
분류 체계
4개 대분류와 75개 하위 분류
ChronoMagic-Bench는 시간에 따른 큰 변화와 시간적 연속성을 갖는 타임랩스 영상 생성을 평가하는 체계다. 변화가 거의 없는 선명한 영상과 실제 변화 과정을 표현한 영상을 구분해 살핀다.

변화 과정의 평가

시각 품질과 텍스트 관련성만으로는 긴 시간의 변화를 압축하는 타임랩스 생성 능력을 알기 어렵다. 생물과 인간 활동 및 기상과 물리 현상의 변화 과정을 평가 대상으로 삼는다.

변화량과 시간적 연속성

MTScore는 시간에 따른 변화의 크기를, CHScore는 시간적 연속성을 평가하도록 설계됐다. 변화가 크다는 특징과 그 과정이 논리적으로 이어진다는 특징을 나누어 다룬다.

평가와 학습 자료의 구분

실제 영상 참조와 입력 문장으로 여러 영상 생성 모형을 사람에게 평가받았다. 같은 연구의 ChronoMagic-Pro는 별도의 대규모 타임랩스·설명 쌍 자료이며, 평가 문장 수와 구분해야 한다.

관련 문서

VBench / EvalCrafter / VideoPhy / T2V-CompBench / Lumiere / VideoScore