공간을 섞는 MLP
일반적인 MLP를 영상에 적용할 때 입력 해상도와 넓은 영역의 상호작용을 다루는 방식이 중요하다. MAXIM은 공간 게이트 MLP로 장거리 상호작용을 지원한다. 작은 영역의 단서와 넓은 문맥을 다중 축 처리로 결합한다.
교차 게이팅
교차 게이트 블록은 서로 다른 특징이 상대 특징을 조건으로 조절하게 한다. 교차 어텐션을 대신할 수 있는 구성으로 제안된다. 이름에 게이트가 들어간다고 특징을 반드시 켜짐과 꺼짐의 두 값으로만 나누는 것은 아니다.
곱셈 조절의 예
설명용 특징 (2, 6)에 게이트 (0.25, 0.5)를 성분별로 곱하면 (0.5, 3)이 된다. 같은 입력도 조절 신호에 따라 강조 정도가 바뀐다. 이는 게이팅의 독립 개념 예제이며 실제 MAXIM 블록 전체나 게이트 값의 범위를 규정하지 않는다.
여러 복원 작업의 비교
잡음 제거와 흐림 제거, 빗줄기 및 안개 제거, 영상 개선 작업에서 구조를 평가한다. 서로 다른 열화가 같은 입력 분포나 목표를 갖는 것은 아니다. 작업별 데이터와 학습 조건을 구분하고 같은 해상도에서 품질 및 실행 비용을 비교해야 한다.
관련 문서
Uformer / Restormer / NAFNet / MPRNet / DehazeFormer / 다층 퍼셉트론