위키득계정 ↗
기술

ComplexWebQuestions

ComplexWebQuestions기술
연구 공개
2018년
발표 학회
NAACL 2018
주요 과제
복합 웹 질의응답
기준 접근
질문 분해와 답의 결합
ComplexWebQuestions는 복합 질문을 여러 단순 질문으로 나눠 웹에서 답하는 연구를 위해 만든 데이터셋이다. 부분 질문의 답을 순서대로 구하고 이를 결합해 최종 답을 도출하는 접근을 평가한다.

복잡한 정보 요구

복합 질문은 여러 정보를 찾고 연결하는 과정을 필요로 한다. 연구는 특정 지식 기반에 정보가 모두 있어야 하는 의미 분석의 제한과 단순 독해의 범위를 넘어 웹을 활용하는 문제를 다뤘다.

단순 질문의 순서로 분해하기

복잡한 질문을 단순 질문들의 연속으로 나눈다. 각 단계는 검색기와 독해 모델로 처리하고 얻은 답들의 관계를 이용해 최종 답을 계산하는 방식이다.

웹과 상호작용하는 모델

새 데이터셋과 함께 질문을 분해하고 웹에서 정보를 구하는 모델을 제시했다. 핵심은 한 번의 검색 결과를 읽는 것보다 질문을 풀기 위한 하위 단계와 검색을 연결하는 데 있다.

분해의 효과 평가

초기 논문은 이 자료에서 질문 분해를 적용했을 때 precision@1이 20.8에서 27.5로 높아졌다고 보고했다. 이 수치는 당시 실험 구성의 비교 결과이며 현재 모델의 성능을 나타내는 값은 아니다.

관련 문서

IIRC / MuSiQue / 2WikiMultiHopQA / IRCoT / HotpotQA / 검색 증강 생성