nerf
[paper review]NeuRAD: Neural Rendering for Autonomous Driving 논문리뷰
안녕하세요. 오늘은 NeuRAD라는 논문에 대해 리뷰하겠습니다.최근 NeRF를 이용한 AD(autonomous driving)분야에 많은 발전을 이끈 논문들이 많이 나오고 있습니다. 보통 NeRF를 사용하여 training augmentation을 수행하거나 test dataset으로 활용을 많이하고 있습니다. 그러나 기존의 방법들은 몇 가지 문제가 존재하는데, 긴 training 시간, 힘든 generalization, dense semantic정보가 필요하다는 것 이였습니다. 논문에서는 이러는 문제점들을 해결하기 위해 여러 방법론을 제시하였는데 자세한건 아래에 살펴보겠습니다.Relative workssynthetic data는 AD에서 매우 유용합니다. harsh breaking상황(corner ea..
[paper review] panoptic nerf(3D-2D Label transfer) 논문 리뷰
이번 포스팅은 panoptic nerf로 3D-2D label transfer관련 논문입니다. 저자분은 KITTI360데이터셋을 구축한 분들 중에 한분으로 현재 고국에서 교수님 생활을 하시면서 후속작을 내신거로 보입니다. Intro 저자분의 경험치에서 나온거겠지만 보통 3D에서 separate instance를 라벨링하는게 2D에서 보다 쉽다고 합니다. sparse하기 때문에 instance가 어느정도 떨어져 있기 때문이겠죠. 그렇기 때문에 3D에서 labeling 정보를 2D(Image)로 transfer하는 것이 합리적이라고 주장합니다. 저자분이 KITTI360을 구축했을때는 이를 위해 CRF라는 method를 사용하여 이를 해결하였는데 최근 NeRF가 각광을 받으면서 이 NeRF를 통해 3D lab..
[3DV] 간략한 3DV history 발전과정(SfM - NeRF - Gaussian Splatting)
안녕하세요. 이번 포스팅은 3DV가 요근래 어떤식으로 발전 혹은 연구되어왔고 또 최근에 나온 기법들은 무엇들이 있는지 general한 시각으로 살펴보겠습니다. 3DV에서는 결국 사람이 보는 2D plane으로 어떻게 잘 rasterization하냐 혹은 2D plane의 pixel들을 어떻게 3D로 reconstruction하냐라는 문제로 압축할 수 있습니다. 그래서 초기에는 이를 위한 여러 파라미터를 줄이는 방식으로 연구를 하였다면 2000년도에 SfM이 대표적입니다. [paper review] Structure from Motion Revisited, Colmap 논문 리뷰 안녕하세요. 후니대디입니다. colmap으로 유명한 SfM revisited 논문을 리뷰해보겠습니다. review 해당논문은 S..
[paper review] BARF : Bundle-Adjusting Neural Radiance Fields 논문 리뷰
안녕하세요. 이번 포스트는 BARF라는 NeRF에 BA의 아이디어를 접목한 논문을 리뷰하겠습니다. 시작하기 전에 BA, NeRF에 대해서 사전 지식이 필요하기 때문에 아래의 포스트 참고하세요. [paper review] NeRF 논문 리뷰 최근 synthetic data들의 중요성이 대두되고 있습니다. simulation, generative model 등 여러 방법이 있지만 여기서는 NeRF를 짧게 분석해보겠습니다. 정 의 NeRF는 Novel View Synthesis 계열의 기술입니다. NVS란 특 jaehoon-daddy.tistory.com [SLAM] 6. Bundle Adjustment 이번 SLAM tutorial 에서는 BundleAdjustment에 대해 포스팅하겠습니다. 앞서 5번째 ..
[paper review] DyNeRF : Neural 3D Video Synthesis from Multi-view Video 논문 리뷰
안녕하세요. 후니대디입니다. 이번 논문은 Neural 3D Video Synthesis from Multi-view Video입니다. 기존의 바닐라 NeRF는 아래 포스팅 참고하세요. [paper review] NeRF 논문 리뷰 최근 synthetic data들의 중요성이 대두되고 있습니다. simulation, generative model 등 여러 방법이 있지만 여기서는 NeRF를 짧게 분석해보겠습니다. 정 의 NeRF는 Novel View Synthesis 계열의 기술입니다. NVS란 특 jaehoon-daddy.tistory.com Intro 우선 논문에서의 목적은 고정되어 있는 여러대의 카메라를 (고프로) 이용하여 video를 촬영하고 이를 이용하여 3D synthesis video를 생성해내..
[paper review] Loc-NeRF:Monte Carlo Localization using Neural Radiance Fields 리뷰
안녕하세요. 후니대디입니다. 이번에는 NeRF 시리즈에 연속으로 Loc-NeRF를 리뷰해보겠습니다. Background 해당 논문은 NeRF를 사용하여 Localization을 시도한 논문으로, 우선 해당 논문을 이해하려면 Particle Filter와 NeRF에 대한 사전지식을 필요로 합니다. 개인적으로는 Loc-NeRF의 novelty는 크지 않지만, localization에 NeRF를 처음 사용해봤다는 것이 의미가 있는 것 같습니다. NeRF의 사전학습은 이전 포스트로 대체하겠습니다. [paper review] NeRF 논문 리뷰 최근 synthetic data들의 중요성이 대두되고 있습니다. simulation, generative model 등 여러 방법이 있지만 여기서는 NeRF를 짧게 분석해..
[paper review] NeRF 논문 리뷰
최근 synthetic data들의 중요성이 대두되고 있습니다. simulation, generative model 등 여러 방법이 있지만 여기서는 NeRF를 짧게 분석해보겠습니다. 정 의 NeRF는 Novel View Synthesis 계열의 기술입니다. NVS란 특정 몇 개의 시점에서 촬영한 이미지로부터 임의의 위치에서 본 대상의 모습을 뽑아내는 이미지 synthetic 기술을 말합니다. 처음에는 SfM | SLAM 등과의 차이가 무엇인지 의문이 들었는데요. SfM은 3D Object를 있는 그대로 정확하게 렌더링 하는 것에 (혹은 pose estimation) 방점을 두는 것이라면, NeRF의 Novel View Synthesis 계열은 synthetic data를 generation 하는 것에 방..