SAM 3D

Описание

SAM 3D — это независимая платформа инструментов третьих сторон, построенная вокруг моделей SAM 3D от Meta, которые расширяют семью Segment Anything от 2D-сегментации до 3D-понимания. Она предоставляет практические инструменты и API, чтобы разработчики и создатели могли реконструировать 3D-объекты, людей и сцены из одного изображения, не управляя исследовательским кодом и инфраструктурой самостоятельно.

Платформа предлагает две семейства моделей: SAM 3D Objects, которая реконструирует общие объекты и сцены, включая геометрию, текстуру и компоновку, и SAM 3D Body, которая специализируется на точной оценке позы и формы человеческого тела в 3D из одного фото. Обе модели работают с одним входным изображением и предназначены для обработки реальных изображений с естественным освещением, фонами и разумной окклюзией.

SAM 3D не является официальным сайтом Meta. Его цель — сделать возможности SAM 3D легкими для интеграции в существующие рабочие процессы и продукты через API и инструменты. Реконструированные модели экспортируются в стандартные форматы, включая GLB, OBJ, PLY и USDZ, которые совместимы с Blender, Unity, Unreal Engine и другими 3D-приложениями.

Основные функции SAM 3D

• 3D-реконструкция объектов, людей и сцен из одного изображения

• SAM 3D Objects для геометрии, текстуры и компоновки общих объектов и сцен

• SAM 3D Body для оценки позы и формы человека в 3D

• API для интеграции SAM 3D в приложения и конвейеры

• Поддержка изображений форматов JPG, PNG и WEBP

• Экспорт в форматы GLB, OBJ, PLY и USDZ

• Совместимость с Blender, Unity и Unreal Engine

Как использовать SAM 3D?

1. 1

   Выберите модель: выберите SAM 3D Objects для объектов и сцен или SAM 3D Body для оценки позы и формы человека.

2. 2

   Загрузите изображение: предоставьте одно фото в формате JPG, PNG или WEBP с четким изображением объекта.

3. 3

   Реконструируйте: запустите реконструкцию, чтобы создать 3D-модель из изображения.

4. 4

   Экспортируйте: скачайте результат в формате GLB, OBJ, PLY или USDZ для использования в вашем 3D-программном обеспечении.

5. 5

   Интегрируйте: при желании используйте API для добавления реконструкции SAM 3D в ваш собственный продукт или конвейер.

Варианты использования SAM 3D

• 3D-активы объектов
• Реконструкция человеческого тела
• Интеграция в конвейер
• AR и веб 3D

Часто задаваемые вопросы SAM 3D

• Что такое SAM 3D?

  SAM 3D — это набор моделей Meta AI, которые реконструируют 3D-объекты, людей и сцены из одиночных изображений, расширяя семью Segment Anything в 3D-понимание.

• В чем разница между SAM 3D Objects и SAM 3D Body?

  SAM 3D Objects реконструирует общие объекты и сцены с геометрией, текстурой и компоновкой, в то время как SAM 3D Body специализируется на точной оценке позы и формы человеческого тела в 3D из одного фото.

• Это официальный сайт Meta?

  Нет. Это независимый сайт инструментов третьих сторон, построенный вокруг SAM 3D и связанных моделей, чтобы упростить их использование в реальных проектах.

• Могу ли я интегрировать SAM 3D в свое приложение?

  Да. Платформа предоставляет возможности SAM 3D через API и инструменты, которые вы можете интегрировать в существующие рабочие процессы для автоматизации 3D-реконструкции или добавления функций генерации в ваш продукт.

• Какие изображения работают лучше всего?

  Изображения из реального мира с естественным освещением и четкими изображениями объектов или людей дают наилучшие результаты реконструкции, хотя модели справляются с разумной окклюзией и беспорядком. Поддерживаются форматы JPG, PNG и WEBP.

• Какие форматы файлов поддерживаются?

  Реконструированные модели экспортируются в форматы GLB, OBJ, PLY и USDZ, все совместимы с Blender, Unity, Unreal Engine и другими 3D-приложениями.