구글 리서치의 RawNeRF, 어두운 곳에서 찍은 사진을 신경망으로 재구성 및 수정

https://bmild.github.io/rawnerf/index.html

NeRF는 너무 많아서 이젠 지겨울 정도였는데 이거는 진짜 빨리 보편화 되었으면 좋겠음

아래에 있는 영상 4:03부터 예시 이미지들 쭉 나오고 그러는데 기대된다 (4:03에서부터 나오는 예시는 트위터에 올라온 영상과 동일)

https://youtu.be/JtBS4KBcKVc

 

If you're still at CVPR and have the stamina to make it through another poster session, check out RawNeRF tomorrow morning! We exploit the fact that NeRF is surprisingly robust to image noise to reconstruct scenes directly from raw HDR sensor data. pic.twitter.com/CEeXWSmt9Q

— Ben Mildenhall (@BenMildenhall) June 24, 2022

 

NeRF가 이미지 노이즈에 놀라울 정도로 강하다는 사실을 이용하여 원시 HDR 센서 데이터에서 직접 장면을 재구성합니다.

RAW 데이터를 학습시켜 어두운 곳에서 사진을 찍어 노이즈가 상당한 이미지에서 장면을 재구성 할 수 있습니다.

또한 카메라의 시점, 노출, 초점, 톤 매핑을 변경할 수도 있습니다.

HDR 뷰 합성

노이즈 제거