수신 영상의 복원
전송 환경에서 품질이 낮아진 동영상을 받는 기기의 자원은 제한될 수 있다. EVRNet은 수신 측에서 실시간 복원을 수행하려는 효율 중심의 모형이다. 영상 한 장의 외관뿐 아니라 이어지는 프레임의 움직임과 장치의 계산 부담도 고려해야 한다.
정렬과 차분과 융합
네트워크 내부를 정렬, 차분, 융합 모듈로 구성해 매개변수를 배분한다. 프레임 사이에 카메라나 물체의 움직임이 있으면 같은 위치의 값만 단순 비교하기 어렵다. 움직임을 다루는 구조와 정보를 합치는 구조의 역할을 구분해 이해할 수 있다.
길이와 열화 조건
블록 왜곡 제거와 잡음 제거, 동영상 초해상도를 평가한다. 학습에 없던 자료에서 여러 열화와 다양한 길이의 시퀀스도 다룬다. 서로 다른 열화가 섞인 조건은 하나의 합성 잡음 조건에서의 결과와 구분해야 한다.
연산량과 지연의 차이
설명용으로 연산 시간이 8밀리초이고 입출력 및 전처리에 12밀리초가 더 들면 전체 지연은 20밀리초다. 연산만 절반으로 줄여도 전체는 16밀리초다. 이는 경량화와 실제 기기 지연이 같은 비율로 줄지 않는 이유를 보여주는 예이며 모델 측정값은 아니다.
관련 문서
EDVR / BasicVSR / BasicVSR 플러스플러스 / RealBasicVSR / FastDVDnet / VRT 영상 복원