정답 수집의 문제
사람이 영상을 보고 시선 위치를 표시하면 판단 차이가 생길 수 있고 시선 추적 안경을 쓰면 외형이 바뀐다. GFIE는 이런 정답 수집의 문제를 줄이려는 시스템을 제안한다.
점으로 주의를 유도하기
레이저 점으로 참가자가 볼 위치를 유도하고 영상에서 점을 찾아 이차원과 삼차원 대상 위치를 주석으로 만든다. 점으로 인한 정답 단서를 제거하는 처리도 포함한다.
공간 속 시선 대상
영상의 같은 위치에 보이는 대상도 실제 깊이는 다를 수 있다. GFIE는 평면 위치만 다루는 평가에서 공간 속 위치를 다루는 평가로 범위를 넓힌다.
수집 조건과 자연스러움
반자동 주석이라고 오차가 전혀 없다는 뜻은 아니다. 레이저로 시선을 유도한 조건과 자발적으로 대상을 고르는 조건의 차이를 고려하고 측정 장치의 정합 상태도 확인해야 한다.
관련 문서
GazeFollow / VideoAttentionTarget / ST-WSGE / 깊이 추정 / 컴퓨터 비전 / 데이터셋