문장 범주별 능력 비교
하나의 측면만으로 생성 조건을 분류하면 모형의 약점이 가려질 수 있다. 서로 독립적인 세 분류 축과 영상의 시간 범주를 이용해 생성 능력을 세분한다.
사람이 확인하는 차이
원 연구는 네 가지 대표 영상 생성 모형을 사람에게 평가받았다. 내용과 속성 및 복잡도에 따라 강점과 약점이 달라지는지 비교해 좋은 예시만으로 능력을 판단하는 한계를 다룬다.
자동 지표의 신뢰성
CLIPScore와 FVD가 사람 평가와 얼마나 일치하는지 조건별로 조사했다. 연구는 기존 지표를 개선하는 두 자동 평가 방법도 제안했으며, 평가 지표의 신뢰성 자체를 검증 대상으로 삼는다.
관련 문서
VBench / EvalCrafter / VideoScore / T2V-CompBench / ChronoMagic-Bench / VideoPhy