관절을 넘어 표면으로
관절 좌표는 손가락의 배치를 요약하지만 손 표면 자체를 나타내지는 않는다. HaMeR는 영상에 보이는 손을 삼차원 표면으로 복원하는 문제를 다룬다.
자료와 모델의 확대
연구는 학습 자료 규모와 네트워크 용량을 함께 늘리는 접근을 취한다. 서로 다른 데이터셋의 이차원 또는 삼차원 주석을 결합하므로 모든 학습 영상에 같은 형태의 정답이 있다는 뜻은 아니다.
통제되지 않은 장면의 평가
별도의 HInt 주석 자료로 일상 영상에서의 결과를 평가했다. 기존 영상에 이차원 손 핵심점 주석을 더한 자료이므로 이를 삼차원 표면 정답 자료와 혼동해서는 안 된다.
복원 결과의 해석
영상에 잘 맞는 손 표면을 얻어도 가려진 부분의 깊이가 유일하게 결정되는 것은 아니다. 이차원 정합과 삼차원 자세 지표를 나누어 살피면 평가가 확인한 범위를 더 정확히 읽을 수 있다.
관련 문서
WildHands / FreiHAND / HO-3D / ARCTIC 손 물체 데이터셋 / 삼차원 재구성 / 컴퓨터 비전