위키득계정 ↗
기술

QMSum

QMSum기술
연구 공개
2021년
발표 학회
NAACL 2021
회의 수
232개
질문과 요약 쌍
1,808개
QMSum은 사용자의 질문에 맞춰 긴 회의록의 관련 부분을 고르고 요약하는 평가 데이터셋이다. 여러 사람과 주제가 등장하는 회의에서 필요한 정보만 정리하는 과제를 다룬다.

하나의 요약이 어려운 이유

긴 회의에는 여러 주제와 참여자의 발언이 섞여 있다. 모든 내용을 짧은 요약 하나에 담기보다 사용자가 궁금한 내용에 따라 필요한 부분을 정리하는 접근을 제시했다.

질문을 조건으로 삼기

모델은 주어진 질문과 관련된 회의 구간을 선택하고 그 내용을 요약해야 한다. 일반적인 회의 전체 요약과 달리 어떤 정보를 찾는지가 입력 조건으로 주어진다.

찾은 뒤 요약하기

연구는 관련 부분을 먼저 찾고 그다음 요약하는 방법을 분석했다. 구간 선택이 부정확하면 요약에 필요한 근거도 빠질 수 있어 두 단계의 연결이 중요하다.

여러 분야의 회의

여러 분야에 걸친 회의 자료로 데이터셋을 구성했다. 초기 연구는 기준 요약 모델들과 수작업 분석을 통해 긴 회의의 질문 기반 요약에 남은 어려움을 살폈다.

관련 문서

GovReport / LongBench / QASPER / QuALITY / 검색 증강 생성 / 자연어 처리