변화가 모두 결함은 아니다
촬영 흔들림이나 깜빡임은 품질을 낮출 수 있지만 의미 있는 사건의 변화는 같은 종류의 결함이 아니다. DisCoVQA는 프레임 사이 변화의 성격을 구별하는 문제를 다룬다. 변화량이 크다는 이유만으로 나쁜 품질이라고 단정하기 어렵다.
시공간 왜곡 추출
STDE는 트랜스포머 기반의 시공간 왜곡 추출 모듈이다. 서로 다른 시간 변화에서 왜곡 단서를 포착하도록 설계한다. 한 프레임의 외관만 보는 평가와 달리 시간 방향의 관계를 표현하는 역할을 맡는다.
내용에 따른 중요도
TCT는 인코더 및 디코더와 유사한 시간 내용 트랜스포머다. 내용이 다른 프레임에 사람이 서로 다른 주의를 기울이는 관계를 다룬다. 특징의 시간 표본 추출로 입력 길이를 줄여 학습의 효율과 효과를 높이는 방법도 사용한다.
같은 밝기 변화의 다른 맥락
설명용으로 무대 조명이 의도적으로 켜지는 장면과 정적인 화면의 밝기가 비정상적으로 출렁이는 장면을 생각할 수 있다. 밝기 변화만으로 둘을 똑같이 평가하기 어렵다. 실제 실험 장면이나 모형 판정을 나타내지 않는 내용과 왜곡 관계의 예다.