위키득계정 ↗
기술

LTE 초해상도

LTE 초해상도기술
영문
Local Texture Estimator
대상
암시적 이미지 표현
주요 정보
국소 질감의 주파수
적용
임의 배율 초해상도
LTE는 이미지 질감의 주요 주파수를 추정해 연속 이미지 표현의 세부 복원을 돕는 방법이다. 초해상도 신경망과 함께 학습하며 좌표를 이미지 내용에 맞는 푸리에 정보로 변환한다.

좌표만으로 어려운 세부

암시적 함수는 좌표를 받아 색을 예측하는 방식으로 이미지를 표현할 수 있다. 그러나 일반적인 다층 퍼셉트론은 빠르게 변하는 고주파 성분을 학습하는 데 어려움이 있을 수 있다. LTE는 이미지 내용에 맞는 질감 정보를 추정해 이 문제를 다룬다.

이미지에 따라 달라지는 주파수

초해상도 특징으로부터 진폭과 주파수 및 위상 정보를 구성하고 좌표의 푸리에 표현을 만든다. 고정된 주파수 목록만 모든 이미지에 똑같이 적용하는 관점과 구별된다. 출력은 연속 좌표에서 질의하는 복원 함수와 연결된다.

주파수의 간단한 예

설명용 함수 cos(2πx)는 x가 0부터 1까지 변할 때 한 주기를, cos(8πx)는 네 주기를 만든다. 두 함수는 같은 구간에서도 변화 속도가 다르다. 질감의 주파수 의미를 보여주는 독립 예제이며 실제 모델이 이 두 주파수만 사용한다는 뜻은 아니다.

확대 결과의 해석

반복 무늬의 주파수를 잘 표현해도 원래 무늬의 개수와 위상이 정확하다는 보장은 없다. 학습한 배율 안과 밖에서 경계 및 질감의 결과를 나누어 확인한다. 이 문서의 LTE는 국소 질감 추정기를 뜻하며 이동통신 규격과는 별개다.

관련 문서

SRNO / LIIF / Meta-SR / SIREN / 푸리에 특징 매핑 / 초해상도