위키득계정 ↗
기술

DEVIL 영상 동역학 평가

DEVIL 영상 동역학 평가기술
연구 공개
2024년
원제
Evaluation of Text-to-Video Generation Models: A Dynamics Perspective
평가 관점
영상 내용의 동역학
주요 측면
범위·제어·동역학 기반 품질
DEVIL은 생성 영상의 움직임 범위와 제어 가능성 및 움직임을 고려한 품질을 평가하는 체계다. 시간적 일관성만 높고 변화가 적은 영상과 문장이 요구한 동적인 영상을 구분해 측정한다.

일관성과 동적인 표현

내용이 끊기지 않고 유지되는 특성만으로는 영상이 얼마나 생동감 있게 움직이는지 알기 어렵다. 연구는 움직임을 텍스트 조건의 충실한 표현에 필요한 별도 차원으로 다룬다.

움직임 등급별 조건

서로 다른 움직임 수준을 요구하는 문장으로 벤치마크를 구성한다. 시간 단위를 달리한 동역학 점수를 정의해 생성 영상의 변화를 여러 규모에서 평가한다.

세 측면의 평가

생성 가능한 움직임의 범위와 문장으로 움직임을 조절하는 능력, 움직임을 고려한 영상 품질을 측정한다. 원 연구는 사람의 평점과의 상관도 확인해 평가 방식의 유효성을 조사했다.

관련 문서

VBench / FETV / ChronoMagic-Bench / EvalCrafter / T2V-CompBench / VideoScore