위키득계정 ↗
기술

GovReport

GovReport기술
연구 공개
2021년
자료 범위
미국 정부 보고서
문서 규모
약 1만 9천 5백 개
평균 문서 길이
약 9천 4백 단어
GovReport는 긴 정부 보고서와 전문가가 작성한 요약을 짝지은 문서 요약 데이터셋이다. 중요한 내용이 문서 전반에 퍼져 있는 긴 입력을 다루는 평가에 사용된다.

긴 문서와 긴 요약

보고서의 평균 길이는 약 9천 4백 단어이며 요약은 평균 약 553단어다. 단문 요약보다 많은 입력과 여러 문단의 요약을 다루도록 구성됐다.

전반에 분산된 중요 내용

요약할 만한 정보가 특정한 앞부분에만 집중되지 않고 문서 전체에 퍼져 있는 것이 주요 특징이다. 입력의 일부만 읽는 방식은 필요한 정보를 놓칠 수 있다.

전문가의 추상적 요약

자료에는 전문가가 작성한 추상적 요약이 함께 제공된다. 원문의 일부 문장을 고르는 방식만이 아니라 내용을 다시 구성해 요약하는 과제의 평가 자료다.

효율성과 요약 품질

함께 발표된 연구는 효율적인 어텐션으로 더 긴 입력을 읽는 조건을 비교했다. 자동 점수와 사람의 평가로 요약의 정보성과 원문에 충실한 정도를 살폈다.

관련 문서

QMSum / LongBench / QASPER / NarrativeQA / RULER / 자연어 처리