본문 바로가기
728x90

3D Vision3

[기술 소개] 3D Object Scanning | MVS | 객체 스캐닝 | 실시간 3D 객체 복원 3D Object Scanning 3D Object Scanning은 multi-view stereo (MVS) 기술을 활용하여 객체의 3D shape을 복원하는 기술이다. 아래 영상을 보면 Niantic이라는 기업에서 Unity SDK에 빠른 non-lidar 스캔 툴을 추가하여 사용자가 객체를 실시간으로 스캔할 수 있게 한다. 스마트폰으로 객체를 다양한 각도에서 촬영하고 객체를 복원하는데 품질이 꽤 좋아보인다. 또한 RealityScan과 같은 앱을 사용하면 스마트폰으로 간단하게 3D 스캔을 경험해 볼 수도 있다. Niantic 기업의 Object Scanning 예시 RealityScan - 3D Scanning App의 결과 예시 출처 : https://sketchfab.com/3d-models.. 2023. 4. 7.
[CV] SFM (Structure From Motion) : 연속된 2D 이미지들로 카메라 포즈와 3D shape 재구성하기 본 포스팅에서는 visual localization에 필수적인 2D 영상으로 3D 정보를 추출하는 SFM (Structure From Motion) 에 대해 최대한 수식없이 각 단계의 목적과 의미에 집중하여 소개하려 한다 SFM은 GUI가 있는 범용 SFM (Structure From Motion), MVS (Multi View Stereo) 파이프라인인 COLMAP 등의 visual localization task 에서 사용된다. COLMAP의 경우 정렬된 또는 정렬되지 않은 이미지의 reconstruction 기능을 제공한다.(Multi-view 이미지들만 넣으면 camera pose + 3D shape을 복원해줍니다.) * SFM과 유사한 알고리즘? SFM과 유사한 알고리즘으로 많이 알려져 있는 S.. 2022. 6. 5.
[논문 리뷰] MVSNet: Depth Inference for Unstructured Multi-view Stereo / 딥러닝을 이용한 Multi-view Stereo Reconstruction 방법 임의의 N개의 view를 입력으로 사용하는 Multi-view Stereo Reconstuction task에서 전통적인 방법이 아닌, CNN 아키텍처를 사용하는 학습 기반의 방법을 제안하는 첫 연구이기에 소개하려 합니다. 지금은 본 논문에선 제안하는 MVSNet 보다 성능이 좋은 네트워크가 많지만, 본 논문에서 제안하는 아이디어를 사용하는 연구가 많습니다. (22년 초 기준 SoTA는 Transformer 기반의 TransMVSNet입니다.) Abstract 본 논문에서는 multi-view(다시점) 이미지에서 depth map inference를 위한 end-to-end 딥러닝 아키텍처를 소개합니다. 네트워크에서 다시점 이미지들의 feature를 추출한 후 미분가능한 homography warping.. 2022. 3. 29.
728x90