두 가지 수집 방식
음성 수집에서는 훈련된 상담 역할의 참여자와 크라우드 작업자가 과업을 완료하도록 대화한다. 자기 대화 방식에서는 한 작업자가 두 역할의 대화를 글로 작성한다. 같은 목적의 대화라도 수집 경로에 따라 표현과 전개가 달라질 수 있다.
세밀한 대본을 벗어난 과업
작은 지식 기반이나 상세한 대본에만 묶지 않고 다양한 상황을 다루도록 구성했다. 정해진 문장을 재현하는 능력보다 요구를 파악하고 대화를 이어 가는 문제를 살필 수 있다.
호출 중심의 주석
대화에 API 호출과 인수를 표시한다. 복잡한 주석 체계 대신 대화 모델과 실제 서비스 호출 사이의 연결을 표현하며, 기능이 비슷한 서비스를 공통된 추상화로 다루려는 설계를 취한다.
수집 조건과 평가
연구는 시퀀스 모델의 정량 평가와 사람의 정성 평가를 함께 제시했다. 음성으로 주고받은 대화와 작성된 대화의 차이를 고려해야 데이터와 모델의 결과를 해석할 수 있다.