위키득계정 ↗
기술

SciFact

SciFact기술
연구 공개
2020년
발표 학회
EMNLP 2020
주장 규모
약 1,400개
주요 근거
연구 문헌의 초록
SciFact는 과학적 주장을 뒷받침하거나 반박하는 연구 초록을 찾고 판단 근거를 식별하는 평가 데이터셋이다. 전문 지식이 담긴 문헌을 검색하고 추론하는 능력을 다룬다.

전문 문헌에서 검증하기

과학적 주장을 판단하려면 관련 연구에서 근거를 찾아야 한다. 이 과제는 주장을 지지하거나 반박하는 내용을 포함한 초록을 선택하도록 한다.

판단을 설명하는 근거

전문가가 작성한 주장에 근거가 있는 초록과 판단 레이블 및 이유가 되는 구간을 연결했다. 문헌을 찾는 일과 그 문헌이 왜 관련되는지 식별하는 일을 함께 평가한다.

분야 적응의 영향

연구는 일반적인 문서나 정치 뉴스로 학습한 모델과 분야 적응을 적용한 모델을 비교했다. 전문 영역의 표현과 지식을 다루는 데 학습 자료의 성격이 영향을 줄 수 있음을 살폈다.

검색과 추론의 연결

관련 초록을 확보하지 못하면 뒤의 판단도 제한된다. SciFact는 전문 지식 말뭉치에서 필요한 근거를 찾고 그 내용과 주장의 관계를 해석하는 연결된 과제를 제공한다.

관련 문서

FEVER / TabFact / 검색 증강 생성 / DPR / 자연어 추론 / 자연어 처리