위키득계정 ↗
기술

LightGlue

LightGlue기술
영문
Local Feature Matching at Light Speed
명칭
LightGlue
입력
국소 특징 집합
주요 성질
문제 난도에 적응하는 추론
LightGlue는 두 영상의 국소 특징을 대응시키는 학습 기반 방법이다. 영상 쌍의 난도에 따라 추론에 쓰는 계산을 조절해 쉬운 대응 문제에서는 더 적은 비용으로 결과를 얻도록 설계한다.

특징 매칭의 역할

특징을 어디서 검출할지와 검출된 특징을 어떤 상대와 연결할지는 다른 문제다. LightGlue는 후자의 대응을 다룬다. 입력 특징의 품질과 수에 영향을 받으므로 매칭 모듈만의 속도를 전체 영상 처리 파이프라인의 속도로 해석하지 않는다.

쉬운 영상 쌍

두 사진이 넓은 영역을 공유하고 외관 변화가 작으면 대응을 찾기 쉬울 수 있다. 반대로 시점이나 조명이 크게 다르면 추가 추론이 필요할 수 있다. LightGlue는 이런 난도에 맞춰 계산을 조절하는 성질을 갖는다.

처리 시간의 독립 예제

쉬운 영상 쌍 8개가 각각 2ms, 어려운 2개가 각각 10ms 걸린다고 가정하면 평균은 3.6ms다. 하지만 어려운 한 쌍의 지연은 여전히 10ms다. 평균 처리량이 좋아지는 것과 최악 조건의 지연이 줄어드는 것은 다르다는 예이며 실제 측정값은 아니다.

비교할 조건

같은 특징 검출기와 영상 크기, 특징 수 및 장치에서 정확도와 실행 비용을 비교한다. 조기 종료 같은 적응적 동작은 설정에 따라 결과가 달라질 수 있다. 쉬운 영상만으로 속도를 판단하지 않고 겹침이 적거나 반복 무늬가 많은 조건도 포함해 살펴본다.

관련 문서

SuperGlue / SuperPoint / LoFTR / MASt3R / DUSt3R / BARF