위키득계정 ↗
기술

ConceptGraphs

ConceptGraphs기술
초기 발표
2023년
표현
그래프 구조의 삼차원 장면
구성 기반
이차원 기반 모델과 다중 뷰 대응
주요 활용
언어 지시에 따른 인식과 계획
ConceptGraphs는 장면의 물체와 관계를 개방형 삼차원 그래프로 나타내는 표현이다. 이차원 기반 모델의 출력을 여러 시점에서 연결해 의미와 공간 관계가 필요한 계획에 활용한다.

점마다 저장하는 지도와의 차이

모든 점에 큰 특징 벡터를 저장하는 지도는 환경이 커질수록 부담이 늘 수 있다. ConceptGraphs는 의미가 풍부하면서도 간결한 계획용 표현을 만드는 문제를 다룬다.

여러 관측의 결합

이차원 모델이 각 관측에서 얻은 출력을 다중 시점 대응으로 삼차원에 융합한다. 그래프 구조는 장면 속 개체뿐 아니라 이들 사이의 의미적 공간 관계를 표현하는 데 쓰인다.

새 개념의 처리

큰 삼차원 자료를 따로 모으거나 모델을 미세 조정하지 않고 새로운 의미 범주로 일반화하는 구성을 제시했다. 이는 사용하는 이차원 기반 모델의 사전 학습까지 없다는 의미는 아니다.

계획에서의 평가

연구는 추상적인 언어 프롬프트로 지정한 여러 계획 과제에서 표현의 유용성을 평가했다. 그래프를 만들었다는 사실과 모든 계획의 실행 가능성이 보장된다는 주장은 구별해야 한다.

관련 문서

ConceptFusion / VLMaps / 장면 그래프 / 지식 그래프 / 시각 언어 모델 / 로봇 내비게이션