손 전체의 접촉
물체를 조작할 때 손끝만 닿는 것은 아니다. OPENTOUCH는 실제 환경에서 손의 어느 부분이 언제 얼마나 강하게 접촉하는지에 관한 촉각 단서를 자기 시점 지각에 더한다.
영상, 촉각, 자세의 동기화
동기화된 기록을 정리해 상세 텍스트 주석을 갖춘 클립으로 제공한다. 클립 수와 전체 기록 시간은 서로 다른 규모 지표이며 2,900개의 독립된 긴 영상으로 해석해서는 안 된다.
검색과 분류 벤치마크
촉각이 지각과 행동 이해를 어떻게 뒷받침하는지 보기 위해 검색과 분류 과제를 제시했다. 자연 환경의 영상 질의에서 촉각 신호를 찾는 관계도 평가한다.
파지 이해의 단서
촉각 신호가 파지 이해와 모달리티 정렬에 주는 정보를 살폈다. 손 전체 접촉 자료는 유용한 관찰이지만 특정 파지 이해 결과가 모든 로봇 손의 행동 제어 정답을 뜻하지는 않는다.
관련 문서
TouchScale / Touch and Go / TVL 촉각 시각 언어 정렬 / Ego4D / 다중모달 학습 / 촉각