단계가 빠지는 오류
제로샷 사고 사슬은 계산 실수와 단계 누락, 의미의 오해 같은 문제를 가질 수 있다. PS 연구는 이 가운데 필요한 단계를 빠뜨리는 문제를 주요 대상으로 삼았다.
계획을 먼저 세우기
전체 과제를 더 작은 하위 과제로 나누는 계획을 만든다. 그다음 계획에 따라 각 하위 과제를 수행하도록 해 분해와 실행을 두 부분으로 구성한다.
더 구체적인 지시의 확장
PS 플러스는 계산 오류와 생성 단계의 품질을 다루기 위해 더 자세한 지시를 더했다. 계획의 존재뿐 아니라 실행 단계에 어떤 요청을 하는지도 비교한 구성이다.
제로샷 조건의 평가
초기 연구는 세 종류의 추론 문제에 걸친 열 가지 자료에서 GPT-3를 평가했다. 풀이 예시가 없는 조건을 중심으로 제로샷 사고 사슬과 프로그램 기반 추론 등과 비교했다.
관련 문서
제로샷 사고 사슬 / Least-to-Most 프롬프팅 / Decomposed Prompting / Program of Thoughts / GSM8K / 언어 모델