설명
SAM 3D는 Meta의 SAM 3D 모델을 중심으로 구축된 독립적인 제3자 도구 플랫폼으로, Segment Anything 패밀리를 2D 분할에서 3D 이해로 확장합니다. 이 플랫폼은 개발자와 제작자가 연구 코드와 인프라를 직접 관리하지 않고도 단일 이미지에서 3D 객체, 인물 및 장면을 재구성할 수 있도록 실용적인 도구와 API를 제공합니다.
이 플랫폼은 두 가지 모델 패밀리를 제공합니다: SAM 3D Objects는 기하학, 텍스처 및 레이아웃을 포함한 일반 객체 및 장면을 재구성하고, SAM 3D Body는 단일 사진에서 정확한 3D 인간 신체 자세 및 형태 추정을 전문으로 합니다. 두 모델 모두 단일 이미지 입력을 기반으로 하며, 자연 조명, 배경 및 합리적인 가림을 가진 실제 이미지를 처리하도록 설계되었습니다.
SAM 3D는 공식 Meta 사이트가 아닙니다. 이 플랫폼은 API와 도구를 통해 SAM 3D 기능을 기존 워크플로우 및 제품에 쉽게 통합할 수 있도록 하는 것을 목표로 합니다. 재구성된 모델은 Blender, Unity, Unreal Engine 및 기타 3D 애플리케이션과 호환되는 GLB, OBJ, PLY 및 USDZ와 같은 표준 형식으로 내보낼 수 있습니다.
SAM 3D의 핵심 기능
객체, 인물 및 장면의 단일 이미지 3D 재구성
일반 객체 및 장면의 기하학, 텍스처 및 레이아웃을 위한 SAM 3D Objects
3D 인간 자세 및 형태 추정을 위한 SAM 3D Body
앱 및 파이프라인에 SAM 3D를 통합하기 위한 API
JPG, PNG 및 WEBP 이미지 입력 지원
GLB, OBJ, PLY 및 USDZ 형식으로 내보내기
Blender, Unity 및 Unreal Engine과의 호환성
SAM 3D 사용 방법은?
모델 선택: 객체 및 장면을 위해 SAM 3D Objects를 선택하거나, 인간 자세 및 형태를 위해 SAM 3D Body를 선택합니다.
이미지 업로드: 주제가 명확하게 보이는 단일 JPG, PNG 또는 WEBP 사진을 제공합니다.
재구성: 이미지를 기반으로 3D 모델을 생성하기 위해 재구성을 실행합니다.
내보내기: 결과를 GLB, OBJ, PLY 또는 USDZ 형식으로 다운로드하여 3D 소프트웨어에서 사용합니다.
통합: 선택적으로 API를 사용하여 자신의 제품이나 파이프라인 내에 SAM 3D 재구성을 추가합니다.
SAM 3D의 사용 사례
- 객체 3D 자산
- 인체 재구성
- 파이프라인 통합
- AR 및 웹 3D
