위키득계정 ↗
기술

InterHand2점6M

InterHand2점6M기술
규모
주석 프레임 약 260만 개
포함 장면
한 손과 상호작용하는 두 손
기준 모델
InterNet
추정 입력
단일 RGB 영상
InterHand2.6M은 한 손과 서로 상호작용하는 두 손의 자세를 담은 데이터셋이다. 약 260만 개의 주석 프레임과 단일 RGB 영상에서 삼차원 손 자세를 추정하는 기준 모델 InterNet을 함께 제시했다.

두 손을 함께 다루기

한 손만 따로 볼 때와 두 손이 겹칠 때는 관절을 구별하는 조건이 달라진다. InterHand2.6M은 여러 사람의 다양한 자세를 통해 단일 손과 상호작용 손을 함께 다룬다.

InterNet의 역할

함께 제시된 InterNet은 단일 손과 상호작용하는 손의 삼차원 자세를 추정하는 기준 모델이다. 데이터셋 이름과 모델 이름을 구분하면 자료를 이용하는 후속 연구를 읽기 쉽다.

상호작용 자료의 효과

연구는 상호작용하는 손의 자료를 학습에 활용했을 때의 자세 추정 정확도를 비교했다. 이는 해당 실험 조건의 결과이며 모든 손 영상에서 같은 개선 폭이 나온다는 주장은 아니다.

프레임 수와 평가 범위

260만이라는 수는 주석된 프레임의 규모다. 사람 수나 서로 독립적인 촬영 장면 수와 같지 않으며, 모델의 일반화는 별도 영상과 평가 조건으로 확인해야 한다.

관련 문서

HaMeR / WildHands / FreiHAND / H2O 손 물체 상호작용 / AssemblyHands / 컴퓨터 비전