주변 시야를 모사하기
사람의 주변 시야에 관한 연구를 바탕으로 마우스 위치에 연동되는 다중 해상도 표시를 설계했다. 이를 통해 영상 탐색에서 주의가 이동하는 양상을 수집한다.
마우스와 눈의 차이
기록한 마우스 행동은 눈의 움직임을 직접 측정한 원시 시선 궤적과 다르다. 일반 마우스로 대규모 수집을 가능하게 하는 대신 측정 방식의 차이를 이해해야 한다.
초기 데이터셋
초기 논문은 풍부한 문맥을 가진 MS COCO 사진 1만 장의 자유 관찰 자료를 개념 검증 데이터셋으로 보고했다. 이는 이후 자료 공개 규모와 구별되는 원논문의 범위다.
현저성 학습의 활용
수집한 자료를 현저성 예측의 학습과 평가에 활용하는 가능성을 검증했다. 사람의 주의 정보를 포함한다는 점과 각 개인의 실제 눈 움직임을 완전히 대체한다는 주장은 서로 다르다.
관련 문서
DeepGaze IIE / DeepGaze III / GazeFollow / COCO 데이터셋 / 컴퓨터 비전 / 데이터셋