위키득계정 ↗
기술

BEHAVE 상호작용 데이터셋

BEHAVE 상호작용 데이터셋기술
최초 연구의 참여자
8명
최초 연구의 물체
일상 물체 20개
촬영 장소
5곳
초기 공개 연구 규모
약 1만5천 프레임
BEHAVE는 자연스러운 환경에서 사람과 물체의 전신 상호작용을 기록한 데이터셋과 추적 방법이다. 다중 관점 RGB-D 영상에 사람 모델과 물체의 삼차원 정합 및 접촉 주석을 연결한다.

자연스러운 장소의 상호작용

물체와 사람을 함께 추적하려면 가림과 다양한 행동을 다뤄야 한다. BEHAVE는 이동 가능한 다중 카메라 구성으로 자연 환경에서 이런 장면을 수집하는 접근을 제시했다.

사람과 물체의 정합

영상 프레임에 SMPL 몸 모델과 물체 형상을 맞추고 표면 접촉을 주석으로 제공한다. 몸의 자세만이 아니라 물체와 몸이 어떻게 맞닿는지도 연구할 수 있다.

대응 관계를 이용한 추적

함께 제시된 방법은 사람과 물체에서 통계적 몸 모델로의 대응을 예측한다. 이를 이용해 삼차원에서 사람, 물체와 둘 사이의 표면 접촉을 추적한다.

규모의 기준

초기 논문에 보고된 프레임 수는 해당 연구의 수집 범위를 나타낸다. 이후 자료 확장이나 다른 프레임률의 배포본을 비교할 때는 같은 버전과 관측 단위인지 확인해야 한다.

관련 문서

GRAB 전신 파지 데이터셋 / AssemblyHands-X / ARCTIC 손 물체 데이터셋 / ContactPose / 삼차원 재구성 / 모션 캡처