위키득계정 ↗
기술

시간 순환 대응 학습

시간 순환 대응 학습기술
연구 이름
Learning Correspondence from the Cycle-Consistency of Time
학습 신호
시간의 순환 일관성
학습 표현
추적용 특징 지도
시험 방식
공간 및 시간의 최근접 이웃
시간 순환 대응 학습은 미주석 영상에서 순환 일관성이 있는 추적에 유용하도록 특징 지도를 학습하는 자기 지도 대응 방법이다. 학습한 표현의 시공간 최근접 이웃으로 새로운 영상의 대응을 찾는다.

영상에서 돌아오는 관계

별도의 의미 주석 없이 시간의 순환 일관성을 시각 대응의 감독으로 사용한다. 학습 때는 순환적으로 일관된 추적에 유용한 특징 지도를 처음부터 학습한다. 여러 영상의 동작 단계를 정렬하는 TCC와 과제 설정이 다르다.

시공간 최근접 이웃

시험에서는 얻은 표현을 이용해 공간과 시간에 걸친 최근접 이웃을 찾는다. 좌표가 같은 픽셀을 고정 대응으로 두는 방식과는 다르다. 학습한 특징이 대응의 기준을 제공한다.

미세 조정 없는 전이

영상 물체 분할과 특징점 추적, 광학 흐름 같은 대응 과제로 미세 조정 없이 전이하는 성질을 평가한다. 전이 조건에서 추가 학습을 하지 않는 것과 사전 학습 자체가 없다는 말은 구분해야 한다.

순환 오류의 독립 예

설명용으로 반복 무늬의 다른 점을 따라갔다가 원위치로 돌아와도 중간 대응은 틀릴 수 있다. 순환을 만족하는 것과 모든 단계의 실제 물체 대응이 정확한 것은 다르다. 실제 연구 영상을 옮기지 않은 일관성 해석의 예다.

관련 문서

시간 순환 일관성 학습 / TCN 시각 표현 / 광학 흐름 / 자기 지도 학습 / DenseCL / 영상 시간 방향 예측