위키득계정 ↗
기술

TRAM 인체 궤적 복원

TRAM 인체 궤적 복원기술
구성
카메라와 사람의 두 단계 복원
카메라 처리
동적인 사람을 고려한 SLAM
척도 단서
장면 배경
몸 움직임 모델
VIMO
TRAM은 일상 동영상에서 사람의 전역 궤적과 움직임을 복원하는 두 단계 방법이다. 배경을 이용해 카메라 움직임의 척도를 구하고, 동영상 트랜스포머로 추정한 몸 움직임과 결합한다.

움직이는 사람과 카메라

장면 안의 사람이 움직이면 카메라 움직임 복원에 영향을 줄 수 있다. TRAM은 동적인 사람이 등장하는 조건에서 SLAM을 보강해 카메라 움직임을 얻는다.

척도를 가진 기준 좌표

배경에서 움직임의 척도를 유도하고 복원한 카메라를 실제 크기 기준의 좌표계로 사용한다. 상대적인 카메라 움직임만 얻는 것과는 구분된다.

동영상에서 몸 움직임 추정하기

VIMO라는 동영상 트랜스포머가 사람의 운동학적 몸 움직임을 회귀한다. 카메라의 움직임과 몸의 움직임을 합성해 전역 공간의 삼차원 사람을 얻는다.

단계별 오차

전역 궤적의 오차는 카메라 추정과 몸 움직임 추정 모두에서 생길 수 있다. 몸 관절이 화면에 잘 맞는지와 장면 안의 이동 경로가 맞는지를 나누어 확인해야 한다.

관련 문서

WHAM / GLAMR / HuMoR / VIBE 인체 복원 / SLAM / 삼차원 재구성