고정 지시에서 대화로
처음 받은 문장만 따르는 것과 달리 수행 중 질문하고 정보를 더 받을 수 있다. TEACh는 언어 이해와 행동뿐 아니라 대화를 이용한 조정도 평가 대상으로 삼는다.
다르게 주어진 정보
지시자는 과제에 관한 정답성 정보를 알고 자연어로 수행자와 소통한다. 수행자는 환경을 이동하고 물체와 상호작용하며 필요할 때 질문한다.
복잡도가 다른 가사
자료는 커피 만들기부터 아침 식사 준비처럼 복잡도가 다른 작업을 포함한다. 실제 사람 둘이 가상 환경에서 작업을 함께 완수하는 대화를 기록했다.
판본과 평가 조건
연구는 대화 이해와 언어의 관측 연결 및 과제 실행을 위한 초기 모델을 평가했다. v3의 EDH 시험은 과제 관련 물체의 상태 변화만 보도록 바뀌었으므로 판본이 다른 수치를 그대로 비교하면 안 된다.
관련 문서
ALFRED / BEHAVIOR / 대화 시스템 / 시각 언어 모델 / HomeRobot / AI2-THOR