Facebook新专利曝光:可用于AR眼镜的深度相机系统

编译/VR陀螺

去年12月下旬,曾有外媒报道称Facebook一直在研究能替代智能手机的智能眼镜,其中包括实现这一目标的秘密新操作系统。Facebook计划中的操作系统将专注于当前和未来的产品,例如增强现实眼镜。

昨天,Facebook的一项新专利曝光,该专利特别涉及到使用光的偏振和相机组件实现深度确定。Facebook专利指出,为了在人工现实系统(MR、AR和VR)中获得引人注目的用户体验,必须依靠准确且高效的摄像头来感测三维(3D)周围环境。

Facebook新专利曝光:可用于AR眼镜的深度相机系统

然而,设计具有高性能和低耗能的深度相机是具有挑战性的,该深度相机还必须对环境稳定、操作灵活并且具有紧凑的外形尺寸。

此外,用于深度感测的常规方法通常涉及基于三角测量或TOF的深度确定,并且具有许多缺点。例如,基于三角剖分的方法通常具有很高的计算成本来生成深度图,该深度图涉及使用一对立体图像的校正和搜索对应点。

使用基于三角剖分的方法实现的深度分辨率也依赖于基线(例如,源与相机之间的距离),并且基线的大小随深度的增加而增加。由于常规传感器中像素数量的限制,用于深度感测的TOF方法的横向分辨率受到限制。

Facebook的发明提供了更好的解决方案。 Facebook声明,他们的深度相机组件(DCA)将确定与本地区域中一个或多个对象相关联的深度信息。

DCA包括光源组件、照相机组件和控制器。光源组件被配置为将光脉冲投射到局部区域中,其中每个光脉冲具有多种偏振类型。相机组件被配置为对被光脉冲照射的局部区域成像。

相机组件包括多个增强像素,其中每个增强像素具有多个门,并且至少在一些门具有各自的本地存储位置。

照相机组件的曝光被分成间隔,并且一些间隔与投影的光脉冲同步,使得每个相应的本地存储位置存储与不同的偏振类型相关联的图像数据。

控制器被配置为部分基于与存储在各个本地存储位置中的图像数据相关联的偏振类型来确定用于本地区域的深度信息。

眼镜式平台,类似于专利中的智能眼镜。下面的图1代表了近眼显示器(NED)或可以进一步集成DCA的某些其他类型的头显。

Facebook新专利曝光:可用于AR眼镜的深度相机系统

NED进一步包括显示器和光学组件。 NED可能是人工现实系统的一部分。NED的显示器可发出图像光,其光学组件被配置为将图像光引导到与用户的眼睛位置相对应的NED眼盒。图像光可以包括由DCA确定的局部区域的深度信息。

Facebook专利图1是近眼显示器(NED)的示意图。图2是图1的NED眼镜截面图。如图1所示,其可以包括深度相机组件(DCA)。

Facebook新专利曝光:可用于AR眼镜的深度相机系统

Facebook的专利图3A是具有多个增强像素的示例传感器,其可以是图2中的深度相机组件(DCA)的一部分。图3B是图3A中传感器的示例性增强像素。

该专利列出的发明人之一是3D相机和传感器技术主管Michael Anthony Hall。他曾是Facebook Reality Labs的光学科学家,Hall之前曾在Microsoft担任HoloLens | Xbox | Kinect的高级光学工程师。

来源:patentlyapple


分享到:


相關文章: