손안 물체의 가림
로봇 손이 물체를 돌리는 동안 손가락이 시야를 가릴 수 있다. NeuralFeels는 새 물체의 형상과 자세를 파악할 때 다지 손의 시각 및 촉각 관찰을 함께 활용한다.
형상과 자세의 공동 추정
물체 기하를 신경장에 온라인으로 담으면서 자세 그래프 문제를 최적화해 추적한다. 형상을 고정한 뒤 위치만 찾는 것과 달리 두 정보를 함께 갱신하는 접근이다.
촉각의 역할
접촉의 국소 정보는 가려진 영역에서 시각 추정을 보완하거나 모호한 후보를 구별하는 단서가 된다. 연구는 시뮬레이션과 실제 환경에서 이를 평가했다.
FeelSight와 조건별 결과
70개 실험의 평가 자료를 제공했다. 알려진 CAD 모델을 쓰는 조건과 새 형상을 추정하는 조건, 시야 가림의 정도를 구분해야 하며 형상 복원 점수와 자세의 누적 오차도 서로 다른 지표다.
관련 문서
MidasTouch / ShapeMap 3-D / TouchSDF / TaRF / DIGIT 촉각 센서 / 3차원 재구성