今天,美国专利商标局公布了苹果公司的一项专利申请,该专利主要涉及生成物理环境的二维和三维几何显示,特别是涉及根据物理环境中检测到的信息生成几何表示的系统、方法和设备。
苹果公司在其专利背景中指出,平面图在设计、理解和改造室内空间方面发挥着重要作用。平面图在传达物理环境的几何和语义信息方面通常很有效。例如,用户可以通过查看平面图来快速识别房间的宽度、墙壁结构和角落、门窗的位置以及物体的排列。
一直以来,业内在提供基于计算机的系统来自动生成平面图、房间测量值或基于传感器数据的物体测量值等方面,始终存在着许多障碍。获得的关于物理环境的传感器数据(例如,图像和深度数据)可能不完整或不足以提供准确的平面图和测量。例如,室内环境往往包含各种各样的物体,如灯、书桌、椅子等,这些物体可能会隐藏房间的建筑线条,而这些线条本来可以用来检测房间的边缘以建立准确的平面图。再比如,图像和深度数据通常缺乏语义信息,在没有这些数据的情况下生成的平面图和测量图可能缺乏准确性。
现有的技术不允许使用移动设备自动、准确和有效地生成平面图和测量结果,例如,基于用户在房间里走动时捕获的照片或视频或其他传感器数据。此外,现有技术可能无法在实时(例如,在扫描过程中立即进行平面图/测量)环境中提供足够准确和高效的平面图和测量。
苹果公司的发明涵盖了使用物理环境的三维(3D)表示法生成平面图和测量的设备、系统和方法。
物理环境的三维表示可以基于传感器数据生成,例如图像和深度传感器数据。在一些实施方案中,使用物理环境的语义标记的三维表示,促进了平面图和测量的生成。