성인 자료의 한계
성인 중심의 시선 데이터로 학습한 모델을 어린이 영상에 그대로 적용하면 조건이 달라진다. ChildPlay는 어린이와 성인의 놀이 및 상호작용 장면을 다루어 이런 평가 공백을 보완한다.
자연스러운 상호작용
통제된 실험실에 한정하지 않고 유치원 등 다양한 환경의 짧은 영상에 시선 정보를 주석으로 제공한다. 움직임과 상호작용을 포함한 상황에서 시선 대상을 추정하는 자료다.
기하 정보의 활용
관련 연구는 깊이 추정을 활용해 사람이 삼차원 시야 안에서 볼 수 있는 장면 부분을 명시적으로 구하는 방법도 제안한다. 평면상의 가까움만으로 시선 대상을 정하지 않으려는 접근이다.
평가 대상별 구분
어린이와 성인의 얼굴 바라보기 예측 결과를 나누어 살피고 어린이 주석을 이용한 미세 조정의 영향을 평가한다. 특정 시선 행동을 예측하는 기술을 개인의 상태나 의도를 확정하는 도구로 해석해서는 안 된다.
관련 문서
GazeFollow / VideoAttentionTarget / Gaze-LLE / 깊이 추정 / 컴퓨터 비전 / 데이터셋