크기 변경이 만드는 차이
품질 평가를 위해 영상을 먼저 작게 줄이면 원래 보이던 잡음이나 세부가 달라질 수 있다. 고정 크기로 자르면 다른 영역의 열화를 놓칠 수도 있다. MUSIQ는 원래 해상도와 다양한 종횡비를 다루는 구조를 제안한다.
여러 규모의 품질 단서
다중 규모 표현으로 국소 및 넓은 영역의 품질을 함께 살핀다. 해시 기반 2차원 공간 임베딩과 스케일 임베딩으로 위치와 규모 정보를 표현한다. 여러 규모를 쓴다는 것이 모든 위치의 품질을 같은 비중으로 평가한다는 뜻은 아니다.
잘라 보기의 예
설명용으로 영상 왼쪽 절반만 흐리고 오른쪽은 선명할 때 오른쪽 조각만 평가하면 왼쪽의 열화를 보지 못한다. 원래 영상 전체와 부분 평가가 다를 수 있다는 예이며 실제 모델의 크롭 규칙이나 점수 계산식을 나타내지는 않는다.
점수의 적용 범위
다양한 대규모 품질 자료에서 성능을 평가한다. 학습 자료의 점수 기준과 이미지 분포가 달라지면 해석에도 주의가 필요하다. 자연스러운 질감에 높은 점수를 주더라도 작은 글자가 원본과 같은지는 별도로 확인하고 입력 설정 및 모델 버전을 맞춰 비교한다.
관련 문서
MANIQA / LPIPS / DISTS / HiFiC / Real-ESRGAN / 비전 트랜스포머