공간 표현에 더하는 정보
이미지의 잡음과 안개 같은 손상은 같은 방식으로 나타나지 않는다. AdaIR는 손상에 따라 영향을 받는 주파수 대역이 다르다는 관찰을 이용한다. 손상 이름을 외부에서 알려 주는 대신 입력에 따른 복원을 지향한다.
두 대역의 정보 추출
손상 이미지의 스펙트럼을 적응적으로 분리하고 이를 안내로 입력 특징의 저주파 및 고주파 정보를 추출한다. 주파수 대역은 화면의 왼쪽과 오른쪽 같은 공간 구역과 다르다. 한 영역에도 여러 주파수 성분이 함께 들어 있다.
양방향 조절과 결합
추출한 특징은 양방향 연산자를 통해 서로 다른 주파수 성분 사이의 상호 작용을 거친다. 조절된 특징을 원래 입력과 합쳐 점진적인 복원을 안내한다. 특정 대역을 무조건 강하게 만드는 방식으로 이해해서는 안 된다.
강조와 보존의 독립 예
설명용으로 줄무늬 천의 가는 선과 그 위의 점 잡음은 모두 빠른 밝기 변화를 만들 수 있다. 고주파를 일괄 제거하면 무늬도 사라지고 일괄 강조하면 잡음도 커진다. 실제 실험을 옮기지 않은 주파수 선택의 예다.
관련 문서
FAPE-IR / LoRA-IR / PromptIR / PromptCIR / MPerceiver / ClearAIR