위키득계정 ↗
기술

IRCoT

IRCoT기술
연구 공개
2022년
발표 학회
ACL 2023
주요 과제
다단계 지식 집약적 질의응답
핵심 절차
검색과 추론의 교차 수행
IRCoT는 여러 단계의 질의응답에서 검색과 자연어 추론 단계를 번갈아 수행하는 방법이다. 앞서 얻은 정보로 다음 검색을 이끌고 새 검색 결과로 이후 추론을 보완한다.

다음 검색은 앞선 결과에 달린다

여러 정보를 연결해야 하는 질문에서는 처음 질문만으로 필요한 자료를 모두 찾기 어렵다. 무엇을 다음에 검색할지는 이미 도출한 내용에 달려 있고 그 내용 역시 이전 검색에 영향을 받는다.

문장 단위의 교차 진행

추론 과정의 단계인 문장과 검색을 교차한다. 추론 내용이 검색을 안내하고 가져온 자료가 다음 추론을 개선하는 순환을 이루도록 구성했다.

여러 자료에서의 비교

논문은 HotpotQA와 2WikiMultihopQA 및 MuSiQue와 IIRC에서 검색과 최종 질의응답 성능을 평가했다. 처음 한 번만 검색하고 읽는 방식과 비교해 여러 단계의 정보 수집 효과를 살폈다.

학습과 모델 조건

다른 분포의 평가와 더 작은 Flan-T5-large 모델에서도 추가 학습 없이 적용하는 실험을 보고했다. 검색된 근거를 추론 과정에 연결하는 방법이며, 생성된 모든 추론이 자동으로 검증된다는 뜻은 아니다.

관련 문서

Adaptive-RAG / FLARE 검색 증강 / Self-RAG / 사고 사슬 프롬프팅 / HotpotQA / 검색 증강 생성