Meta「分割一切」进入3D时代!图像分割结果直出3D,有遮挡也能复原
克雷西 发自 凹非寺 量子位 | 公众号 QbitAI Meta的"分割一切",这回给 3D建模 带来了新的范式—— 现在,图像分割得到的切片,可以直接转换成3D模型了。 只要一张图,就能对里面的每个物体进行单独重建,有遮挡也不用怕。 这就是Meta MSL实验室刚刚发布的三维重建模型SAM 3D。 与此同时,MSL实验室之前投稿ICLR 2026的分割模型SAM 3,也终于露出了真容。 之前SAM 3就在一般图像分割的基础上增强了语义理解,论文一公布就备受关注。 现在又上新SAM 3D,许久不见出成果的Meta AI,总算是打出了一组王炸。 分割结果生成3D模型 SAM 3D家族包含两个新模型——SAM 3D Objects,用于物体和场景重建;以及SAM 3D Body,专注于人体,这两个模型均能够将静态2D 图像转换为精细的3D重建模型。 SAM 3D Objects能够从单张自然图像中实现基于视觉的3D重建和物体姿态估计。 即使存在小物体、间接视角和遮挡现象等障碍,依然可以进行重建,弥补了仅凭像素不足以完成重建的不足。 SAM 3D Objects的性能显著优于现有方法,能够很好地泛化到多种类型的图像 ...