좌표 이상의 정보
시선 위치를 열지도로 표시하는 것만으로는 무엇을 바라보는지 명확하지 않을 수 있다. 이 접근은 대상 영역, 픽셀 위치와 함께 바라보는 물체의 종류 및 영상 위치를 다룬다.
사람과 대상 연결
장면 속 물체와 사람의 머리를 검출한 뒤 각 머리와 바라보는 머리 또는 물체 사이의 관계를 구성한다. 대상이 물체일 수도 다른 사람일 수도 있는 상황을 표현한다.
화면 밖의 시선
사람이 보는 대상이 영상 밖에 있을 가능성도 예측한다. 장면 안에 그럴듯한 물체가 있다는 사실만으로 시선 대상이 반드시 그 물체라고 정할 수는 없다.
관계 추정의 오류
가상의 장면에서 컵과 책이 가까이 놓여 있다면 작은 위치 오차가 대상 종류를 바꿀 수 있다. 위치 정확도와 물체 분류 및 검출 정확도를 나누어 평가해야 한다.
관련 문서
Gaze-LLE / VideoAttentionTarget / 객체 탐지 / 트랜스포머 / 컴퓨터 비전 / 카메라