近日,美国专利商标局公布了苹果公司的一项新专利申请,名为“基于高效图像捕获和聚散度以及瞳孔间距离历史记录进行眼动追踪”。本发明涉及 Apple Vision Pro 及未来的智能眼镜。
苹果专利涵盖了通过交错每只眼睛的图像捕获来追踪用户眼部特征(例如,注视方向或瞳孔位置),并使用用户眼部捕获之间的预测关系来预测这些眼部捕获之间的眼睛特征。
用户眼睛的图像以交错的方式捕获,从某种意义上说,第二只眼睛的图像是在第一只眼睛的图像捕获时间之间捕获的,反之亦然。
一些实施例提供了一种设备,该设备通过交错图像捕获来追踪用户双眼注视方向,并使用双眼聚散历史来预测捕获之间的中间帧的另一只眼睛的注视方向。
例如,为了以 N fps 速率确定双眼的注视方向,可以以 N/2 fps 的速度捕获每只眼睛的交错图像,第一只眼和第二只眼睛的图像捕获间隔 1/N 秒,并且可以根据另一只眼睛在每个中间帧时间的注视方向和当时预测的聚散度来预测每只眼睛的帧。
在一个示例中,该设备包括一个或多个图像传感器,这些传感器配置为交错捕获用户第一只眼睛和第二只眼睛的图像,其中第一只眼睛的图像在捕获时以大约第一帧速率捕获,第二只眼睛的图像以大约第一帧速率捕获。第二只眼睛的图像是在第一只眼睛图像的捕获时间之间捕获的。
一些实施例提供了一种设备,该设备通过交错每只眼睛的图像捕获来追踪用户两只眼睛的瞳孔位置,并使用瞬时 IPD 预测另一只眼睛的瞳孔位置。
例如,为了以 N fps 速率确定双眼的瞳孔位置,可以以 N/2 fps 捕获每只眼睛的交错图像,并根据另一只眼睛在每个中间帧时间的瞳孔位置和当时预测的瞬时 IPD 预测每只眼睛的帧之间的中间瞳孔位置时间。
苹果专利图 1 说明了用于追踪用户眼睛的示例设备,图 1 示出了使用具有两个眼部摄像头 #120a 和 #120b(每只眼睛一个摄像头)的设备(#100)追踪用户的两只眼睛 #125a 和 #125b。
该设备(例如,眼镜设备或其他头戴式设备)包括两个眼部摄像头(#120a 和 #120b)、两个照明器(#122a 和 #122b)和两个内容查看部分(#130a 和 #130b)。这些组件可以嵌入或连接到设备 #100 的外壳或其它部分。例如,如果设备 #100 是眼镜设备,则两个眼部摄像头和照明器可以嵌入到眼镜设备的框架部分(未示出)中,该框架部分围绕或支持两个内容查看部分。
苹果专利图 2 说明了捕获眼睛图像以进行眼动追踪的示例时间轴。
苹果专利图 7 说明了单目水平注视角度的示例;图 8 示出了水平聚散度的示例;图 9 示出了用于确定垂直聚散度的单目垂直凝视角度示例。
苹果专利图 10 以上是追踪眼睛特征的方法的流程图表示;图 11 是示例性装置的组件框图。
免责声明:本文图片引用自网络,如有侵权请联系我们予以删除
搞趣网发布此文仅为传递信息,不代表搞趣网认同其观点。