장면 관계에서 질문 만들기
장면 그래프의 구조를 활용하는 질문 생성 엔진으로 다양한 추론 질문을 만든다. 단순한 물체 이름뿐 아니라 장면 속 관계를 조합하는 질문을 다룰 수 있다.
의미를 나타내는 프로그램
각 질문에는 의미를 표현하는 함수형 프로그램이 함께 제공된다. 연구는 이 정보를 이용해 답 분포를 제어하고 질문의 편향을 완화하는 조절 가능한 평활화 방법을 제시했다.
정답률 바깥의 평가
질문에 한 번 맞혔는지뿐 아니라 응답이 일관적인지, 영상의 근거와 연결되는지, 가능한 답인지를 평가하는 지표를 포함한다. 서로 관련된 질문 사이의 행동도 분석 대상이다.
세부 유형의 분석
논문은 질문의 종류와 구조에 따라 기준 모델 및 당시 비교 모델의 결과를 세분화했다. 생성 질문 전체의 규모와 실제 실험에서 선택한 분할이나 균형화 구성은 구분해야 한다.