사진 한 장에서 자세로
카메라가 어디에 있고 어느 방향을 향하는지를 영상에서 직접 예측한다. 비슷한 장소 사진을 검색하는 것과 달리 위치와 방향의 수치 표현을 출력하는 회귀 문제다.
분류 표현의 전이
대규모 영상 분류 자료에서 학습한 표현을 자세 추정에 활용한다. 연구는 23층 합성곱 신경망으로 영상 평면 밖의 기하량을 회귀할 수 있음을 제시했다.
하나로 연결된 학습
단일 영상에서 자세까지 전체 모델을 연결해 학습한다. 별도의 그래프 최적화 없이 신경망이 자세를 회귀하는 구성을 제안했다.
관측 조건과 전이
논문은 실내와 실외의 위치 추정 및 조명·운동 흐림 등의 조건을 평가했다. 다른 장면으로 특징을 전이하는 실험도 수행했으며, 특정 실험의 정확도와 속도는 그 평가 환경에 한정된다.
관련 문서
MapNet 카메라 위치 추정 / MegaLoc / CosPlace / 합성곱 신경망 / 전이 학습 / 기하 정합