좌표를 분포로 표현하기
하나의 좌표 값만 출력하면 후보 위치가 여러 개인지 드러내기 어렵다. I2L-MeshNet은 각 좌표의 위치 가능도를 일차원 히트맵으로 나타내 예측의 불확실성을 다룬다.
영상의 공간 관계
영상에서 메시 모델 매개변수를 곧바로 회귀하면 입력 화소의 공간 관계가 끊어지는 문제가 생길 수 있다. 연구는 영상에서 lixel로 이어지는 예측으로 이 문제를 다루려 한다.
꼭짓점과 모델 매개변수
꼭짓점 좌표를 표현하는 것과 몸 모델의 자세·형상 매개변수를 예측하는 것은 출력 공간이 다르다. 같은 삼차원 복원 과제라도 네트워크가 무엇을 직접 예측하는지 확인해야 한다.
히트맵의 해석
히트맵이 넓게 퍼져 있으면 한 점에 집중된 경우와 예측의 모양이 다르다. 다만 모델이 산출한 가능도와 실제 오차의 관계는 평가로 확인해야 하며, 분포를 출력한다는 이유만으로 정확성이 보장되지는 않는다.
관련 문서
MANO 손 모델 / HaMeR / HAMR 손 메시 복원 / 자세 추정 / 삼차원 재구성 / 히트맵