광택은 고정된 무늬가 아니다
반짝이는 물체의 밝은 부분은 카메라가 이동하면 표면 위에서 위치가 달라질 수 있다. 이를 물체에 붙은 색 무늬처럼만 표현하면 다른 시점에서 부자연스럽게 보일 수 있다. Ref-NeRF는 나가는 빛을 반사된 빛의 관점으로 구조화한다.
법선과 방향의 예
법선이 n=(0,0,1)인 평면에 입사 진행 방향 d=(0.6,0,−0.8)이 도달한다고 하자. 이상적인 반사 방향 d−2(d·n)n은 (0.6,0,0.8)이다. 이는 단위 벡터의 반사 계산 예이며 실제 재질의 색이나 거칠기까지 결정하는 식은 아니다.
표면 성질의 역할
공간에 따라 달라지는 장면 성질로 반사 외관을 구성하고 법선이 안정되도록 정규화한다. 법선이 흔들리면 같은 표면에서도 반사 방향이 불안정해질 수 있다. 내부 표현에 구조를 두는 것은 학습 결과를 해석하고 일부 성질을 편집하는 데에도 도움이 된다.
평가할 외관
한 장의 이미지에 밝은 점이 선명한지뿐 아니라 시점 변화에 따라 하이라이트가 일관되게 움직이는지 살펴본다. 반사 표현을 개선했다고 모든 투명체나 거울 반사와 다중 반사 문제를 완전히 해결하는 것은 아니다. 형상과 외관의 오류를 나누어 확인한다.
관련 문서
NeRF / NeRF-Casting / Zip-NeRF / VolSDF / NeuS / 3D 가우시안 스플래팅