손 주변의 공간
손만 지역 좌표계에서 복원하면 주변 물체나 장면과의 전역적인 배치를 놓칠 수 있다. Hand3R는 손 메시와 주변 기하를 함께 복원하는 문제를 다룬다.
전문가와 장면 모델
손에 특화된 사전 학습 모델의 정보를 사차원 장면 모델에 전달한다. 장면을 고려하는 시각 프롬프트가 두 구성 요소를 연결하는 역할을 한다.
시간에 따른 기억
손의 사전 정보를 지속적인 장면 기억에 반영해 영상이 들어오는 순서에 따라 복원을 진행한다. 논문은 오프라인 최적화 의존을 피하는 추론 구조를 제시한다.
지역 자세와 전역 위치
손가락 형태가 정확한지와 장면 안에서 손이 올바른 위치에 있는지는 별개의 평가다. Hand3R의 결과도 지역 손 복원과 전역 배치로 나누어 확인해야 하며, 모든 촬영 조건의 정확도나 처리 속도가 보장되는 것은 아니다.
관련 문서
WildHands / HaMeR / HOLD 손 물체 복원 / MANO 손 모델 / 삼차원 재구성 / 컴퓨터 비전