今天，美国专利商标局正式公布了苹果公司一系列共25项新授权专利。在其中，有一份与生成3D模型相关的专利。
在3D模型生成过程中排除活动对象
苹果公司在其专利背景中指出，物理环境已经通过生成3D网格、利用3D点云和其他方式进行建模（例如，重建）。重建的网格代表3D表面点和物理环境的地板、墙壁和其他对象的其他表面特征。这种重建可以基于物理环境的图像和深度测量来生成，例如，使用RGB相机和深度传感器。
现有的基于物理环境的图像和物理环境中检测到的深度信息生成3D模型的技术，在捕获的图像信息中有移动的对象（如人、动物等）时，可能是不准确和低效的。此外，在重建物理环境时，在3D模型中包括某些对象可能是不可取的。
因此最好能排除那些正在移动或被认为是“可移动物体”的对象。例如，当一个物体在移动，而光强度信息由RGB相机捕获，深度信息由深度相机捕获时，在图像采集过程中可能会产生失真和干扰。因此，移动物体产生的干扰可能会导致不理想的效果或意外的出现，例如，导致3D表示法显示不准确和其他明显的问题。
苹果公司的发明涵盖了各种实施方案，其中包括使用深度数据和从RGB图像数据中生成的物体掩码，生成排除了可能移动的人或其他物体的3D模型的设备、系统和方法。3D模型是根据物理环境的图像、在物理环境中检测到的深度信息以及用于跟踪设备/深度相机的特定位置和方向的其他信息生成的。
出于各种原因，可能希望将各种物体从生成的3D模型中排除。例如，可能需要排除那些通常不是物理环境的固定部分的物体（例如，人、动物等）。这样做可以提供一个更有用的、真实的或有物理意义的模型。作为一个具体的例子，可以对一个人坐在椅子上的物理环境进行建模，通过排除人而得到椅子的建模。
图源：patentlyapple
苹果公司的专利图6是使用3D数据和基于深度和光强图像信息的分割掩码生成3D模型的示例系统流程图。
想了解更多专利细节，可查阅苹果的授权专利11640692。
来源：patentlyapple
