사람과 카메라의 움직임
영상 속 사람이 이동한 것처럼 보여도 카메라의 움직임이 섞여 있을 수 있다. GLAMR는 사람의 전역 움직임과 카메라 자세를 함께 다루며 일관된 좌표의 복원을 목표로 한다.
보이지 않는 구간 채우기
보이는 몸 움직임을 조건으로 생성형 보완기가 가려진 구간을 자기회귀적으로 채운다. 화면 밖으로 나간 구간도 다루지만, 생성한 움직임이 직접 관측된 사실과 같지는 않다.
궤적을 기준점으로 사용하기
지역 몸 움직임에서 전역 궤적을 예측하고 이를 최적화의 기준으로 활용한다. 사람 움직임과 카메라를 동시에 복원할 때 부족한 제약을 보완하는 역할이다.
영상 관측과의 정합
최적화는 예측 궤적을 다듬고 이차원 핵심점 같은 영상 단서에 카메라 자세를 맞춘다. 가려진 움직임의 자연스러움과 전역 위치 오차, 보이는 관측의 일치도를 구분해 결과를 평가해야 한다.
관련 문서
HuMoR / LEMO 동작 사전 / VIBE 인체 복원 / AMASS / 자세 추정 / 삼차원 재구성