절차를 담은 영상
하나의 교육 영상에는 목표를 이루기 위한 여러 단계가 이어진다. COIN은 다양한 일상 작업의 이런 구조를 조직하고 분석하기 위한 자료다.
계층적 구성
분야와 작업의 계층으로 영상을 구성했다. 논문은 12개 분야, 180개 작업에 걸친 영상 11827개를 보고했으며, 이 수치는 해당 발표 기준이다.
단계 설명과 시간 경계
영상에 단계 설명과 해당 단계의 시간 경계를 주석했다. 영상 전체의 작업 이름만 맞추는 것뿐 아니라 어느 구간에서 어떤 단계가 수행되는지를 평가할 수 있다.
단계 사이의 의존성
관련 연구는 단계 사이의 의존성을 포착하는 방법을 기존 후보 구간 기반 행동 검출에 결합했다. 여러 평가 기준으로 접근법을 비교해 교육 영상 분석의 기준을 제시했다.
관련 문서
CrossTask / Ego4D Goal-Step / Assembly101 / HoloAssist / UVAST / 행동 인식