위키득계정 ↗
기술

PromptCIR

PromptCIR기술
전체 이름
Blind Compressed Image Restoration with Prompt Learning
대상
알 수 없는 압축 품질의 영상
조건 표현
암시적 압축 정보 프롬프트
기반
트랜스포머와 동적 프롬프트 모듈
PromptCIR는 압축 수준을 미리 모르는 이미지의 흔적을 복원하는 프롬프트 학습 방법이다. 이미지 특징에서 만든 부드러운 가중치와 프롬프트가 상호 작용해 내용과 왜곡에 맞는 안내를 제공한다.

숫자 품질 인자만으로 부족할 때

JPEG 등의 압축 흔적을 복원할 때 품질 인자를 예측해 사용하는 접근이 있다. 그러나 숫자 하나에는 손상의 공간 정보가 충분히 담기지 않을 수 있다. PromptCIR는 이미지 내용에 따라 달라지는 복원 안내를 다룬다.

특징과 프롬프트의 상호 작용

프롬프트에 압축 정보를 암시적으로 담고 이미지 특징에서 생성한 부드러운 가중치와 직접 상호 작용하게 한다. 이로써 내용과 왜곡을 고려한 동적 안내를 제공한다. 텍스트로 압축 수준을 입력하는 방식과는 역할이 다르다.

압축 수준에 대한 적응

경량 프롬프트와 트랜스포머 기반망으로 여러 압축 수준을 다룬다. 추가 매개변수가 적다는 것과 전체 복원 연산이 가볍다는 주장은 구분해야 한다. 알려지지 않은 코덱이나 반복 압축 조건에서는 적용성을 확인할 필요가 있다.

영역별 흔적의 독립 예

설명용으로 같은 사진의 하늘에는 계단형 계조가, 작은 글자에는 테두리 흔적이 나타날 수 있다. 같은 압축 파일 안에서도 보완해야 할 단서가 다르다. 실제 실험 영상을 옮기지 않은 공간별 복원 안내의 예다.

관련 문서

PromptIR / JPEG / SwinIR / Restormer / DIIP / 스코어 기반 이미지 압축