728x90 ๐ Research/3D Vision3 [๋ ผ๋ฌธ ๋ฆฌ๋ทฐ] NeRF ๊ฐ๋จ ์ค๋ช & ์๋ฆฌ ์ดํดํ๊ธฐ | ์๋ก์ด ๋ฐฉํฅ์์ ๋ฐ๋ผ๋ณธ view๋ฅผ ์์ฑํ๋ ๊ธฐ์ - paper : NeRF: Representing Scenes as Neural Radiance Fields for View Synthesis / ECCV2020 NeRF ๋ ผ๋ฌธ์ด ๊ณต๊ฐ๋์ง๋ ์๊ฐ์ด ๊ฝค ํ๋ ๋๋ฐ, 2020 ECCV์์ ๊ณต๊ฐ๋์ ๋๋ง ํด๋ ๊ต์ฅํ ์ ๊ธฐํ๊ณ ํ๊ธฐ์ ์ธ view synthesis ๋ฐฉ๋ฒ์ผ๋ก ๊ด์ฌ์ ๋ฐ์์ง๋ง, ์ฌ๋ฌ ๋จ์ ๋๋ฌธ์ ์ค์ ์๋น์ค์ ์ ์ฉ๋๊ธฐ๋ ์ฝ์ง ์์๋ค. ํ์ง๋ง, 2023 CVPR์์๋ 2022๋ ์ ๋นํด radiance๋ผ๋ ๋จ์ด์ ์ฌ์ฉ์ด 80% ์ฆ๊ฐํ๊ณ , NeRF์ ๊ฒฝ์ฐ 39% ์ฆ๊ฐํ์ ๋งํผ NeRF๋ ํ๋ฐํ ์ฐ๊ตฌ๋๊ณ ์๋ค. ํนํ ์ด์ ๊ฐ๋ ์ฆ๋ช ์ ๋์ด veiw editing ์ด๋ ๊ฐ์ข application ์ฐ๊ตฌ๊ฐ ์งํ๋๊ณ ์๋ค. ์ฆ NeRF๊ฐ ์ด์ ๊ฐ์ข ์๋น์ค์ ํ์ฉ๋ ๋ง.. 2023. 8. 10. [๊ธฐ์ ์๊ฐ] 3D Object Scanning | MVS | ๊ฐ์ฒด ์ค์บ๋ | ์ค์๊ฐ 3D ๊ฐ์ฒด ๋ณต์ 3D Object Scanning 3D Object Scanning์ multi-view stereo (MVS) ๊ธฐ์ ์ ํ์ฉํ์ฌ ๊ฐ์ฒด์ 3D shape์ ๋ณต์ํ๋ ๊ธฐ์ ์ด๋ค. ์๋ ์์์ ๋ณด๋ฉด Niantic์ด๋ผ๋ ๊ธฐ์ ์์ Unity SDK์ ๋น ๋ฅธ non-lidar ์ค์บ ํด์ ์ถ๊ฐํ์ฌ ์ฌ์ฉ์๊ฐ ๊ฐ์ฒด๋ฅผ ์ค์๊ฐ์ผ๋ก ์ค์บํ ์ ์๊ฒ ํ๋ค. ์ค๋งํธํฐ์ผ๋ก ๊ฐ์ฒด๋ฅผ ๋ค์ํ ๊ฐ๋์์ ์ดฌ์ํ๊ณ ๊ฐ์ฒด๋ฅผ ๋ณต์ํ๋๋ฐ ํ์ง์ด ๊ฝค ์ข์๋ณด์ธ๋ค. ๋ํ RealityScan๊ณผ ๊ฐ์ ์ฑ์ ์ฌ์ฉํ๋ฉด ์ค๋งํธํฐ์ผ๋ก ๊ฐ๋จํ๊ฒ 3D ์ค์บ์ ๊ฒฝํํด ๋ณผ ์๋ ์๋ค. Niantic ๊ธฐ์ ์ Object Scanning ์์ RealityScan - 3D Scanning App์ ๊ฒฐ๊ณผ ์์ ์ถ์ฒ : https://sketchfab.com/3d-models.. 2023. 4. 7. [๋ ผ๋ฌธ ๋ฆฌ๋ทฐ] MVSNet: Depth Inference for Unstructured Multi-view Stereo / ๋ฅ๋ฌ๋์ ์ด์ฉํ Multi-view Stereo Reconstruction ๋ฐฉ๋ฒ ์์์ N๊ฐ์ view๋ฅผ ์ ๋ ฅ์ผ๋ก ์ฌ์ฉํ๋ Multi-view Stereo Reconstuction task์์ ์ ํต์ ์ธ ๋ฐฉ๋ฒ์ด ์๋, CNN ์ํคํ ์ฒ๋ฅผ ์ฌ์ฉํ๋ ํ์ต ๊ธฐ๋ฐ์ ๋ฐฉ๋ฒ์ ์ ์ํ๋ ์ฒซ ์ฐ๊ตฌ์ด๊ธฐ์ ์๊ฐํ๋ ค ํฉ๋๋ค. ์ง๊ธ์ ๋ณธ ๋ ผ๋ฌธ์์ ์ ์ํ๋ MVSNet ๋ณด๋ค ์ฑ๋ฅ์ด ์ข์ ๋คํธ์ํฌ๊ฐ ๋ง์ง๋ง, ๋ณธ ๋ ผ๋ฌธ์์ ์ ์ํ๋ ์์ด๋์ด๋ฅผ ์ฌ์ฉํ๋ ์ฐ๊ตฌ๊ฐ ๋ง์ต๋๋ค. (22๋ ์ด ๊ธฐ์ค SoTA๋ Transformer ๊ธฐ๋ฐ์ TransMVSNet์ ๋๋ค.) Abstract ๋ณธ ๋ ผ๋ฌธ์์๋ multi-view(๋ค์์ ) ์ด๋ฏธ์ง์์ depth map inference๋ฅผ ์ํ end-to-end ๋ฅ๋ฌ๋ ์ํคํ ์ฒ๋ฅผ ์๊ฐํฉ๋๋ค. ๋คํธ์ํฌ์์ ๋ค์์ ์ด๋ฏธ์ง๋ค์ feature๋ฅผ ์ถ์ถํ ํ ๋ฏธ๋ถ๊ฐ๋ฅํ homography warping.. 2022. 3. 29. ์ด์ 1 ๋ค์ 728x90