일정 속도 가정의 한계
두 프레임 사이를 일정한 속도로 움직인다고 가정하면 중간 위치를 선형으로 계산할 수 있다. 하지만 실제 대상은 가속하거나 방향을 바꿀 수 있다. QVI는 영상의 가속도 정보를 활용해 이차 움직임으로 중간 궤적을 예측한다.
관측하지 않은 시점의 흐름
중간 프레임은 아직 없으므로 그 위치에서 입력으로 향하는 흐름을 바로 관측할 수 없다. 흐름 반전 층으로 이런 흐름장을 추정하고 정제하는 구성을 사용한다. 이차 궤적을 사용해도 가림과 대응의 모호함이 모두 없어지는 것은 아니다.
선형과 이차의 예
설명용으로 x(t)=4t와 x(t)=4t²는 t=0에서 모두 0이고 t=1에서 모두 4다. 하지만 t=0.5에서는 각각 2와 1이다. 같은 끝점이 같은 중간 위치를 의미하지 않는다는 예이며 실제 모델의 예측 궤적은 아니다.
평가할 움직임
속도 변화와 곡선 이동, 큰 변위 및 가림을 나누어 보간 결과를 확인한다. 이차식도 모든 복잡한 운동을 정확히 표현하는 것은 아니다. 작은 경계의 이중상과 대상 형태의 왜곡, 시간적 일관성 및 전체 처리 비용을 함께 비교한다.
관련 문서
XVFI / Super SloMo / RIFE / IFRNet / BMBC / 광류