위키득계정 ↗
기술

RAPTOR 검색

RAPTOR 검색기술
연구 공개
2024년
색인 구조
계층형 요약 트리
구성 절차
임베딩과 군집화 및 요약의 반복
주요 대상
긴 문서의 질의응답
RAPTOR는 문서의 여러 부분을 반복적으로 묶고 요약해 트리 구조를 만드는 검색 방법이다. 짧은 원문 조각부터 상위 수준의 요약까지 함께 검색해 긴 문서의 넓은 문맥을 활용한다.

짧은 조각 검색의 한계

연속된 짧은 문서 조각만 가져오는 방식은 문서 전체의 내용을 종합하는 데 제한이 있을 수 있다. RAPTOR는 개별 세부 내용과 더 추상적인 문맥을 함께 찾는 문제를 다뤘다.

아래에서 위로 요약하기

텍스트 조각을 임베딩하고 군집화한 뒤 요약하는 과정을 재귀적으로 수행한다. 이런 절차로 서로 다른 요약 수준을 가진 트리를 아래에서 위로 구성한다.

여러 추상화 수준의 검색

추론 시 만들어 둔 트리에서 관련 정보를 검색한다. 원문의 세부 내용과 그 위의 요약을 이용해 긴 문서의 여러 부분에 흩어진 정보를 통합하려는 접근이다.

복합 질문의 평가

논문은 통제된 실험에서 재귀 요약을 활용한 검색과 전통적인 검색 증강 방식을 비교했다. 여러 단계의 추론이 필요한 질의응답과 QuALITY 같은 자료에서 효과를 평가했다.

관련 문서

GraphRAG / 검색 증강 생성 / QuALITY / Self-RAG / FiD / 언어 모델