전달 비트수와 복원 품질
이미지 압축은 제한된 비트로 원본을 표현하는 문제다. 생성 모형의 능력을 활용하더라도 원본과의 수치 오차와 사람이 느끼는 자연스러움은 다르게 변할 수 있다. 같은 비트율에서 어떤 품질 항목을 개선하는지 구분해야 한다.
두 단계 구성
먼저 평균제곱오차를 목표로 하는 오토인코더를 사용하고 뒤에 스코어 기반 디코더를 연결한다. 원본에 가까운 표현을 만드는 과정과 생성 기반의 지각적 보완을 결합하는 접근이다. 두 역할을 하나의 단순한 선명화 연산으로 취급하지 않는다.
생성에서 압축으로 옮길 때
텍스트 이미지 생성에서 효과적이었던 설계가 압축에서도 그대로 최적이라고 볼 수 없다. 원본을 표현하는 정보와 비트 예산이 중요한 조건으로 추가되기 때문이다. 구현 선택이 품질에 미치는 영향을 압축 목적에 맞게 확인해야 한다.
자연스러움과 정확성의 독립 예
설명용으로 거친 직물 표면을 복원하면서 그럴듯한 섬유 무늬가 생길 수 있다. 자연스럽게 보여도 섬유 하나하나가 원본과 같다는 뜻은 아니다. 실제 연구의 결과를 재현하지 않은 예이며 지각적 보완을 무손실 복원과 구분한다.
관련 문서
HiFiC / ELIC / 스케일 하이퍼프라이어 / 확산 모형 / LPIPS / DISTS