움직임을 공통 표현으로
새 과제마다 별도의 동작 규칙을 작성하는 대신 시연에서 움직임을 읽어낸다. 영상 속 점을 따라가는 표현을 이용해 관측과 로봇의 수행을 연결한다.
관련된 점의 선택
영상에는 과제와 무관한 움직임도 포함될 수 있다. RoboTAP은 시연에 관련된 움직임을 분리하고 이를 저수준 제어기의 매개변수로 사용한다.
배치가 달라진 수행
시연 때의 장면을 그대로 재생하는 데서 나아가 다른 배치에서도 동작을 재현하는 것을 목표로 한다. 형상 맞추기와 쌓기뿐 아니라 접착제를 바르는 연속 경로 작업도 제시했다.
빠른 시연의 의미
연구는 수분 안에 모을 수 있는 시연으로 여러 작업을 수행한 사례를 보고했다. 이는 시연 수집 부담에 관한 결과이며, 추적 모델과 제어기 같은 사전 구성 없이 즉시 동작한다는 의미는 아니다.
관련 문서
점 추적 / TAPIR / 모방 학습 / DITTO 궤적 변환 / Transporter Networks / 로봇 조작