복잡한 정보 요구
복합 질문은 여러 정보를 찾고 연결하는 과정을 필요로 한다. 연구는 특정 지식 기반에 정보가 모두 있어야 하는 의미 분석의 제한과 단순 독해의 범위를 넘어 웹을 활용하는 문제를 다뤘다.
단순 질문의 순서로 분해하기
복잡한 질문을 단순 질문들의 연속으로 나눈다. 각 단계는 검색기와 독해 모델로 처리하고 얻은 답들의 관계를 이용해 최종 답을 계산하는 방식이다.
웹과 상호작용하는 모델
새 데이터셋과 함께 질문을 분해하고 웹에서 정보를 구하는 모델을 제시했다. 핵심은 한 번의 검색 결과를 읽는 것보다 질문을 풀기 위한 하위 단계와 검색을 연결하는 데 있다.
분해의 효과 평가
초기 논문은 이 자료에서 질문 분해를 적용했을 때 precision@1이 20.8에서 27.5로 높아졌다고 보고했다. 이 수치는 당시 실험 구성의 비교 결과이며 현재 모델의 성능을 나타내는 값은 아니다.
관련 문서
IIRC / MuSiQue / 2WikiMultiHopQA / IRCoT / HotpotQA / 검색 증강 생성