NeRF(Neural radiance Fields)

NeRF는 신경 네트워크를 사용해 입력된 2D 이미지를 컬렉션 기반으로 사실적인 3D 장면을 표현하고 rendering한다. NeRF에 공급할 데이터를 수집하는 것은 마치 레드 카펫 사진작가가 모든 각도에서 유명인의 의상을 캡쳐하는 것과 비슷함. 신경 네트워크에는 장면 주변의 여러 위치에서 촬영한 수십 개의 이미지와 각각의 카메라 위치가 필요하기 때문

 

 사람이나 기타 동적인 요소가 포함된 장면들은 빨리 캡쳐될 수록 좋음. 2D 이미지 캡쳐 과정에서 움직임이 너무 많으면 AI가 생성한 3D 장면이 흐려지기 때문.

 

NeRF는 공백을 채우고 3D 공간의 모든 지점에서 전 방향으로 방출되는 빛의 색상을 예측해 장면을 재구성하도록 작은 신경망을 훈련함. 이 기술은 일부 이미지에서 보이는 물체가 다른 이미지에서 기둥과 같은 장애물에 의해 차단되는 경우에도 해결책으로 사용할 수 있음.