대본 없는 주방 활동
참여자의 자연스러운 주방 활동을 긴 영상으로 기록한다. 미리 잘라 둔 짧은 행동만이 아니라 지속적인 활동 속의 세부 동작을 분석하는 자료다.
주석 과정의 확장
이전 자료보다 동작 주석을 더 조밀하고 완전하게 만드는 절차를 제시했다. 전체 약 2천만 프레임의 영상과 동작 구간은 같은 단위의 수가 아니다.
시간 변화에 대한 검증
2018년에 모은 자료로 학습한 모델을 두 해 뒤의 새 영상에 적용하는 평가를 포함한다. 촬영 시기가 다른 환경에서 성능이 유지되는지 살피는 조건이다.
여섯 가지 과제
완전·약한 감독의 동작 인식, 동작 검출, 동작 예측, 캡션 기반 교차 모달 검색과 비지도 도메인 적응을 다룬다. 과제마다 허용하는 감독과 입력 범위가 다르다.
관련 문서
Ego4D / Ego-Exo4D / Assembly101 / HOI4D / WildHands / 컴퓨터 비전