위키득계정 ↗
기술

FreeSOLO

FreeSOLO기술
기반 구조
SOLO
감독 조건
무주석 자기 지도 학습
출력 관점
범주 비의존 인스턴스 분할
사전 학습
위치 인식 학습
FreeSOLO는 주석 없이 범주 비의존 인스턴스 분할을 학습하는 자기 지도 프레임워크다. SOLO 구조를 바탕으로 복잡한 장면의 물체를 발견하는 위치 인식 사전 학습을 제안한다.

개체를 나누는 주석 비용

인스턴스 분할에는 물체 상자나 픽셀 마스크 같은 감독을 만드는 비용이 든다. FreeSOLO는 이런 주석 없이 물체 개체별 영역을 학습하는 문제를 다룬다. 범주 비의존 분할은 개체의 이름까지 모두 예측하는 설정과 다르다.

SOLO 위의 자기 지도 구성

단순한 인스턴스 분할 방법 SOLO를 기반으로 자기 지도 프레임워크를 구성한다. 복잡한 장면에서 물체를 비지도 방식으로 발견하는 위치 인식 사전 학습도 함께 제시한다.

무주석 결과와 전이 결과

무주석 인스턴스 분할 및 위치 추정과 함께 소량의 주석으로 미세 조정할 때의 사전 학습 효과를 평가한다. 후속 미세 조정에 마스크를 사용한 결과를 완전히 무주석인 결과로 설명해서는 안 된다.

범주와 개체의 독립 예

설명용으로 나란한 두 컵을 두 마스크로 구별하되 컵이라는 이름은 붙이지 않을 수 있다. 개체 구별과 의미 이름 부여가 다른 목표임을 보여 준다. 실제 연구 이미지를 옮기지 않은 범주 비의존 분할의 예다.

관련 문서

SOLO / CutLER / TokenCut / LOST 물체 위치 추정 / 인스턴스 분할 / 자기 지도 학습