겹치는 사람의 관절
자세 추정은 사람의 주요 관절 위치를 찾는 작업이다. 군중 장면에서는 다른 사람의 팔이나 다리가 가까이 나타나므로 관절을 찾은 뒤 누구에게 속하는지도 구분해야 한다.
여러 위치 후보의 예측
단일 사람 자세 추정 단계에서 관절마다 하나의 위치만 고르지 않고 여러 봉우리를 예측한다. 다른 사람이 함께 포함된 영역에서도 가능한 관절 후보를 남기는 구성이다.
전체 장면의 연결
후보들을 그래프 모형으로 연결해 전역적으로 관절을 연관 짓는다. 개별 영역의 예측만으로 결정하기 어려운 간섭을 장면 전체의 관계를 통해 처리하려는 방식이다.
방법과 벤치마크
연구는 군중 조건을 평가하는 데이터셋과 추정 방법을 함께 제시했다. CrowdPose에서 기존 방법과 비교하고 MS COCO에서도 결과를 확인해 다른 자료로의 일반화 능력을 조사했다.
관련 문서
CrowdHuman / CityPersons / WIDER FACE / LVIS / Open Images V4 / DomainNet