苹果研究凝视跟踪以改变镜头控制AR和VR中的相机

Apple AR硬件可能会移动镜头或外接摄像头，从而为“ Apple Glass”佩戴者提供正确的对焦，以准确显示他们所看的东西。

苹果公司以前有很多有关注视跟踪的专利，例如与隐私相关的专利，用于检测您是否分心或阅读通知。它甚至只是通过渲染您要查看的内容来加快Apple AR的速度，或者降低其他所有内容的分辨率以节省电量，这完全与它有关。

但是，现在，“专注于虚拟和增强现实系统”是一项新授予的专利，希望进一步扩展凝视跟踪。这是有关自动调整镜头的另一项较早的专利申请的补充，并增加了您注视控制外部相机的潜力。

苹果公司说：“对于增强现实应用，注视跟踪信息可用于引导外部相机聚焦在用户注视的方向上，从而使相机聚焦在用户注视的物体上。”

“对于AR或VR应用，凝视跟踪信息可用于调整眼镜镜片的焦点，以使用户当前在显示器上观看的虚拟内容具有适当的聚散度，以匹配用户眼睛的聚光度， “它继续。

因此，该专利与如何跟踪注视无关。这是关于信息一旦被追踪该如何处理。例如，用户可能在虚拟会议中，在该会议中，实际的空间通过一系列摄像机中继给了他们。

当他们向左看时，可以自动告诉该物理房间中的摄像机重新对焦，甚至重新定位以提供最佳视野。苹果公司表示：“外部相机可能包括自动对焦机制，使相机可以自动对焦在环境中的物体或表面上。”

不过，这不只是提供最佳视图。看来，这还与解决Apple在对头戴式显示器(HMD)的测试中必须发现的问题(例如“ Apple Glass ”)有关。

苹果公司说：“在传统的AR HMD中，自动对焦机制可能专注于用户没有看的东西。” 这可能是在不具有注视跟踪功能的HMD中实现的，尽管苹果没有指定。

它只是说，凝视跟踪可以“将外部摄像机的自动聚焦机制指向用户注视的方向，以便外部摄像机将焦点对准用户当前正在查看的环境中的对象。”

最终，目标是始终向用户显示他们选择要查看的内容。该专利还涵盖了他们正在观看的是录音时的情况。

苹果说：“在某些实施例中，可以在回放录制的视频期间应用调节眼透镜的焦点。” “深度信息可以与视频一起记录，也可以从计算机图形中获取。”

该专利仅归功于D.Amnon Silverstein，他先前的相关工作包括使用运动检测自动对焦图像的专利。