다국어와 교차 언어의 차이
여러 언어를 지원하는 자료라고 질의와 문서가 반드시 다른 언어인 것은 아니다. MIRACL은 각 언어 안에서 질의와 같은 언어의 문서를 찾는 단일 언어 검색 모델의 개발과 평가를 지원한다.
언어 자원의 연속성
서로 다른 계통과 유형의 언어를 포함하고 자료가 풍부한 언어와 적은 언어를 함께 다룬다. 영어 중심 결과만으로 설명하기 어려운 검색 성능의 차이를 연구한다.
질의와 관련성 판단
소개 논문은 위키백과를 대상으로 약 7만 7천 질의와 70만 건 이상의 관련성 판단을 수집했다고 설명한다. 판단은 연구팀이 고용한 원어민 평가자가 수행했다.
평가 자료의 목적
WSDM 2023 Cup을 위해 구성한 자료와 기준 모델을 제시했다. 언어별 검색 접근성의 차이를 살피고 다양한 언어의 정보 검색을 개선하는 연구 기반이다.
관련 문서
LAMAR 다국어 재순위화 / 정보 검색 / 검색 증강 생성 / BM25 / 전이 학습 / 자연어 처리