순서가 제공하는 감독
영상을 시간 순서대로 보거나 섞어 보면 정적인 사진과 다른 변화 정보가 생긴다. Shuffle and Learn은 프레임 열의 시간 순서가 맞는지 확인하는 순차 판별 과제로 표현을 학습한다. 행동 이름을 직접 감독하는 방식과 다르다.
시간에 따라 변하는 특징
연구는 사람이 취하는 자세처럼 시간에 따라 달라지는 정보를 표현이 포착하는지 정성적으로 분석한다. 단일 이미지의 감독 표현과 상호 보완적인 정보를 얻는 방향이다.
전이와 결합의 평가
학습한 특징을 행동 인식의 사전 학습과 자세 추정에 사용하고 감독 표현과 결합하는 효과도 평가한다. 사전 과제에서 의미 레이블을 쓰지 않는 조건과 후속 과제의 감독 사용 조건을 구분해야 한다.
판별 모호함의 독립 예
설명용으로 정지한 벽만 담은 프레임은 순서를 섞어도 관측이 비슷하다. 시간 순서 레이블을 만들 수 있어도 모든 장면에 충분한 변화 단서가 있는 것은 아니다. 실제 연구 영상을 옮기지 않은 사전 과제의 예다.
관련 문서
자기 지도 학습 / 시간 대비 비선형 ICA / 자기 이동 감독 시각 학습 / RotNet 표현 학습 / 직소 퍼즐 표현 학습 / 합성곱 신경망