위키득계정 ↗
기술

HOI4D

HOI4D기술
영상 프레임
약 240만 개
시퀀스
4천 개 이상
물체
16개 범주의 800개 개체
참여자와 장소
4명과 실내 공간 610곳
HOI4D는 일인칭 RGB-D 동영상으로 물체 범주 수준의 사람·물체 상호작용을 연구하는 데이터셋이다. 시간별 손과 물체 자세, 분할 주석과 공간 자료를 제공해 동적 장면의 인식 및 추적을 평가한다.

범주와 개별 물체

같은 종류의 물체라도 개체마다 형상이 다를 수 있다. HOI4D는 특정 물체 하나에만 맞춘 추정을 넘어 물체 범주 수준의 자세 추적과 상호작용을 다룬다.

프레임별 주석

파놉틱 분할과 움직임 분할, 삼차원 손 자세, 범주 수준 물체 자세와 손 행동을 주석으로 제공한다. 복원한 물체 메시와 장면 점군도 포함한다.

세 가지 평가 방향

사차원 동적 점군 시퀀스의 의미 분할, 물체 범주 수준의 자세 추적과 일인칭 행동 분할을 벤치마크로 제시한다. 각 과제는 출력과 정답 정의가 다르다.

자료 다양성의 단위

물체 개체 수와 범주 수, 참여자 및 공간의 수는 다른 다양성을 나타낸다. 프레임 수가 많다는 사실만으로 참여자나 행동의 분포까지 넓다고 판단해서는 안 된다.

관련 문서

Ego4D / Ego-Exo4D / H2O 손 물체 상호작용 / DexYCB / ARCTIC 손 물체 데이터셋 / AssemblyHands