3D与动画 Meta SAM3D:单图秒生成可交互 3D 模型的开源工具
Meta 推出的 SAM3D 是 Segment Anything 系列最新开源模型,可通过单张 2D 照片快速生成高质量、物理正确的可交互 3D 模型,刷新空间理解 SOTA 水平。
Meta 推出的 SAM3D 是 Segment Anything 系列最新开源模型,可通过单张 2D 照片快速生成高质量、物理正确的可交互 3D 模型,刷新空间理解 SOTA 水平。
SAM3D Objects 面向通用物体与场景重建,SAM3D Body 专注人像重建,两类场景均能输出高质量 3D 资产。
生成的 3D 模型具备可交互特性,满足后续编辑、展示等功能需求,无需额外后期处理。
已集成至 Quest3 设备与 Horizon Worlds 创作工具,计划推出手机端实时推理 SDK,支持开发者调用 API。
采用 “空间位置 - 语义” 联合编码技术,为输入 2D 图像的每个像素精准预测 3D 坐标与表面法向,保障 3D 模型的物理正确性。
在多个权威基准测试中表现优于现有方法,空间理解能力达到行业领先水平(SOTA)。
为 Quest3、Horizon Worlds 等平台提供高效 3D 素材生成方案,降低创作者门槛。
适用于游戏开发、影视特效制作,快速构建虚拟场景与数字人像。
助力电商平台打造 3D 产品展示模块,提升用户购物体验。
为 AI 开发者提供开源模型与 API 接口,支持二次开发与场景拓展。
在 Quest3 设备或 Horizon Worlds 创作工具中,直接调用集成的 SAM3D 功能,上传单张 2D 照片即可生成 3D 模型。
待手机端实时推理 SDK 发布后,开发者可通过官方提供的 API 接口,在自有应用中集成 SAM3D 的 3D 生成能力。
VR/AR 内容创作者、游戏开发者、影视特效从业者、电商运营人员、AI 技术开发者、计算机视觉领域科研人员。
单图输入门槛极低,生成速度快(秒级响应);3D 模型质量高、物理正确性强;开源开放,支持多平台集成;双场景覆盖满足多样化需求。
手机端 SDK 尚未正式上线,当前使用场景受限;复杂动态场景的重建效果仍需实际验证;对运行设备的硬件性能有一定要求。
3D 建模工具、开源 AI 模型、VR/AR 辅助工具、图像生成工具、开发者工具、数字内容创作工具
一项由字节跳动和清华大学联合开发的肖像动画技术,它能够将静态肖像图像和驱动表演视频结合起来,生成具有高度表现力和真实感的角色动画和视频。