위키득계정 ↗
기술

TriviaQA

TriviaQA기술
발표
2017년
질문과 답
약 9만 5천 쌍
초기 연결 자료
65만 개 이상의 질문·답·근거 삼중항
근거 문서 수
질문당 평균 여섯 개
TriviaQA는 퀴즈 질문과 별도로 수집한 근거 문서를 연결한 독해 자료다. 질문과 답의 표현이 근거 문장과 크게 다를 수 있어 여러 문장을 이해하고 필요한 정보를 조합하는 능력을 평가한다.

질문과 근거의 별도 수집

퀴즈 애호가가 만든 질문과 답에 독립적으로 모은 근거 문서를 연결했다. 문서를 보고 질문을 작성하는 방식과 달리 이미 만들어진 질문에 답할 자료를 찾는 구성을 갖는다.

원격 지도 신호

질문과 답 및 근거 문서의 연결이 학습을 위한 원격 지도 신호를 제공한다. 하나의 질문에 여러 문서를 연결하므로 질문과 답의 쌍 수와 전체 삼중항 수는 서로 다르다.

표현이 다른 근거 문장

질문과 답이 있는 문장 사이에는 어휘와 구문 표현의 차이가 크다. 같은 단어가 들어 있는 구간을 고르는 것만으로는 필요한 정보를 찾기 어려운 이유다.

문장 사이의 추론

질문은 복합적인 구성을 가지며 답을 위해 문장 사이의 정보를 연결해야 하는 경우가 많다. 초기 연구는 특징 기반 분류기와 신경망 기준 모델을 비교해 이러한 독해의 난도를 살폈다.

관련 문서

SQuAD / Natural Questions / HotpotQA / DPR / 질의응답 / 자연어 처리