위키득계정 ↗
기술

ChartQA

ChartQA기술
발표
ACL Findings 2022
사람 작성 질문
약 9천 6백 개
요약 기반 생성 질문
약 2만 3천 1백 개
핵심 능력
시각적 대응과 논리·산술 추론
ChartQA는 차트의 시각적 특징과 논리·산술 관계를 이용해 질문에 답하는 능력을 평가하는 벤치마크다. 사람이 쓴 질문과 차트 요약에서 생성한 질문을 함께 제공한다.

차트에서 값을 읽는 것 이상

차트 질문은 여러 값을 비교하거나 논리와 산술 연산을 결합해야 할 수 있다. 색상이나 모양처럼 차트의 시각 특징을 언급하는 질문도 단순한 숫자 검색과 구분된다.

두 종류의 질문 자료

사람이 직접 작성한 질문과 사람이 쓴 차트 요약에서 생성한 질문을 포함한다. 두 자료의 생성 경로가 다르므로 모두 사람이 직접 쓴 질문으로 설명하면 정확하지 않다.

시각 특징과 표의 결합

같은 연구는 차트의 시각 특징과 데이터 표를 통합하는 두 트랜스포머 기반 모델을 제시했다. 영상만 보거나 표만 읽는 설정과는 입력 조건을 구분해야 한다.

복잡한 추론의 평가

논문은 기존 자료와 새 벤치마크에서 모델을 평가하고 복합 추론 질문의 어려움을 분석했다. 차트에 표시된 항목을 찾는 정확도와 여러 연산으로 답을 구성하는 정확도는 별도로 살펴볼 필요가 있다.

관련 문서

PlotQA / DocVQA / 시각 질의응답 / 트랜스포머 / 산술 / 데이터 시각화