알파만으로 부족한 경우
머리카락 같은 경계에서는 원본 화소에 배경 색이 섞여 있다. 알파만 추정하고 원본 색을 전경 색처럼 쓰면 새 배경에 옛 배경의 색이 남을 수 있다. FBA 매팅은 전경과 배경 색을 함께 예측하는 구성을 연구한다.
세 값의 관계
단순 합성 모형에서는 관측 색이 알파를 곱한 전경과 나머지 비율의 배경으로 표현된다. 한 관측만으로 세 값을 유일하게 정할 수 없어 시각 단서와 학습이 필요하다. 전경 색과 알파가 각각 어떤 정보를 나타내는지 구분해야 한다.
새 배경에서의 차이 예
설명용 선형 채널에서 전경 1, 기존 배경 0, 알파 0.5라면 관측은 0.5다. 새 배경이 0.8이면 올바른 합성은 0.9다. 관측 0.5를 전경 색으로 잘못 쓰면 0.65가 되어 어두워진다. 이 계산은 이상화한 단일 채널 예다.
공동 예측의 평가
같은 알파 오차에서도 전경 색 오차가 다르면 합성 결과가 달라진다. 따라서 알파 정확도와 색의 복원 품질을 함께 확인해야 한다. 공동 예측이 모호함을 완전히 없애지는 않으며 평가에서는 보조 입력 조건과 합성 배경, 경계 영역의 특성을 맞춰 비교한다.
관련 문서
Background Matting V2 / MODNet / RVM 영상 매팅 / Cutie 영상 객체 분할 / 합성곱 신경망 / DEVA 영상 분할