조명과 내용을 나누는 관점
야간 장면은 조명이 부족할 뿐 아니라 위치에 따라 복잡하게 달라진다. DTP는 조명에 불변인 반사 성분과 조명에 특화된 성분을 명시적으로 나눈 뒤 의미 분할을 수행하는 틀을 제안한다.
반사 성분의 추출
SOD는 조명에 얽힌 특징을 바로 처리하는 대신 조명 변화에 방해받지 않는 반사 성분을 추출하도록 한다. 이런 분리는 복잡한 조명 아래에서도 의미 인식을 일관되게 하려는 설계 목표다. 완전한 물리적 분해의 보장은 아니다.
조명도 의미 단서로 활용하기
조명 성분은 혼동되는 영역을 구별하는 단서가 될 수 있다. IAParser는 의미와 조명의 관계를 명시적으로 학습하고 조명 특징을 모아 예측을 보완한다. 조명 영향을 줄이는 것과 조명 정보를 모두 버리는 것은 다르다.
조명 단서의 독립 예
설명용으로 차량의 켜진 전조등은 주변을 밝힐 뿐 아니라 물체를 구별하는 단서도 된다. 밝기 정보를 전부 제거하면 그 단서도 잃을 수 있다. 실제 연구 사례를 옮기지 않은 불변 표현과 조명 활용의 구분이다.
관련 문서
RetinexNet / DIAL-Filters / NightLab / DANNet / Dark Zurich / 의미 분할