위키득계정 ↗
기술

스케일 공간 흐름

스케일 공간 흐름기술
영문
Scale-Space Flow
관련 논문
Scale-Space Flow for End-to-End Optimized Video Compression
대상
저지연 학습 영상 압축
추가 변수
워핑의 스케일
스케일 공간 흐름은 움직임 보정에 위치 이동뿐 아니라 스케일 변수를 더하는 학습 영상 압축 방법이다. 워핑 중 불확실한 영역의 흐림 정도를 조절해 빠른 움직임과 새로 드러난 영역을 다루려 한다.

위치 이동 이외의 조절

일반적인 광류 워핑은 입력 영상에서 이동한 위치를 읽는다. 정확한 대응이 어려운 곳에서는 그 예측이 부정확할 수 있다. 스케일 공간 흐름은 위치 이동에 스케일 변수를 추가해 불확실성을 표현하는 자유도를 둔다.

스케일 공간에서 샘플링

원본으로부터 여러 흐림 정도를 갖는 스케일 공간을 만들고 위치 및 스케일에 따라 샘플링한다. 대응이 좋지 않은 곳에서 흐림을 조절할 수 있다. 이는 단순히 출력 영상의 가로세로 해상도를 바꾸는 설정과 다르다.

불확실한 경계의 예

설명용으로 밝기 0과 10의 경계 위치를 확신하지 못하면 정확한 한 위치를 잘못 선택하는 것과 주변을 완만하게 표현하는 것은 다른 선택이다. 불확실성을 다루는 개념 예제이며 흐리게 만들면 항상 압축이나 화질이 좋아진다는 뜻은 아니다.

저지연 설정의 평가

미래 프레임을 참조하는 B프레임 없이 저지연 영상 압축을 평가한다. 사전 학습 광류망 없이 더 단순한 학습 절차를 연구한다. 비트율 및 왜곡, 빠른 움직임의 경계와 전체 인코딩 및 디코딩 비용을 같은 조건에서 비교한다.

관련 문서

시간 문맥 마이닝 / DVC 영상 압축 / DCVC / 광류 / 영상 압축 / 스케일 공간