위키득계정 ↗
기술

SLAHMR

SLAHMR기술
이름
Simultaneous Localization and Human Mesh Recovery
입력
일상 환경 동영상
장면 단서
배경 화소의 움직임
목표
공통 좌표의 사람과 카메라 궤적
SLAHMR는 동영상에서 사람과 카메라의 움직임을 분리해 여러 사람의 전역 궤적을 복원하는 방법이다. 상대 카메라 추정과 학습한 사람 움직임 사전을 결합해 장면 척도의 모호함을 다룬다.

완전한 장면 복원 없이

배경 화소의 움직임은 정밀한 장면 전체를 복원하지 못해도 카메라 운동을 제한하는 단서가 될 수 있다. SLAHMR는 이 단서를 사람 움직임의 사전 지식과 함께 사용한다.

척도의 모호함

상대 카메라 움직임만으로는 실제 이동 크기가 정해지지 않을 수 있다. 데이터로 학습한 동작 사전과 카메라 추정을 결합해 사람의 전역 궤적과 척도를 찾는다.

여러 사람의 공통 공간

복원한 카메라 척도는 여러 사람을 같은 세계 좌표에 놓는 데 쓰인다. 각 사람을 서로 다른 지역 좌표에서 따로 복원하는 것과는 다른 관계 정보를 제공한다.

복원과 후속 추적

관련 연구는 EgoBody에서 삼차원 복원을 평가하고 PoseTrack에서 여러 사람의 후속 추적에 활용했다. 영상의 인물 연결이 맞는지와 삼차원 이동 경로가 맞는지는 구분해 검증해야 한다.

관련 문서

GLAMR / WHAM / TRAM 인체 궤적 복원 / GVHMR / HuMoR / SLAM