苹果新专利：未来HMD或在输入系统中增加眼动追踪功能，可更直观进行交互

近日，美国专利商标局公布了苹果公司的一项专利申请，该专利涉及一种未来的HMD，该HMD被配置为在眼动追踪系统中检测眼球运动。注视点预估也可用于眼睛姿态识别，并为各种用户界面提供输入，如选择或在设置之间切换，以及提供输入快捷方式。

【资料图】

苹果公司在其专利中指出，一些设备提供眼动追踪系统，以实现人机互动。在某些用途中，设备可以捕捉到用户的眼球运动，将该运动作为操作和调用设备功能的直观输入，从而实现更快、更有效的互动，这能够减少用户和设备之间交互的障碍。

苹果公司的发明涉及一种头戴式设备，它有多个电极，被配置为检测光学事件，如一个或多个眼睛的运动或粗略的眼睛姿势。

在一些示例中，一个或多个电极可以与介电弹性体材料耦合，其形状可以改变，以改变头戴式设备的用户与一个或多个电极之间的接触，以确保足够的接触和电极信号质量。

在一些示例中，一个或多个电极可以与压力传感器和控制电路耦合，以监测和调整施加的压力。光学事件也可被用作操作设备的触发器，包括在操作电源模式之间过渡。在一些示例中，触发器可以调用头戴式设备的更高分辨率感应能力。

在一些示例中，电极可被用作头顶探测器来唤醒和/或解锁设备。

随着计算机输入技术的不断发展，输入设备的各种进步使用户能够更有效地与计算系统互动。被配置为检测眼睛运动元件的头戴式设备就是一个创新示例，可以进一步提高用户与一个或多个计算系统交互的速度、效率和便利性。

在其他实施方案中，可以检测到用户的注视点以无缝调用设备的功能。例如，当用户的手被占用时，一个或多个眼部事件（例如，眼睛眨动、眼睛聚焦和/或（眼睛）注视点的移动）可以被设备监测到，以唤醒和/或解锁设备。注视预估也可用于眼睛姿势识别，并为各种用户界面提供输入，如选择或在设置之间切换，并提供输入快捷方式。

眼部事件可以包括一次或多次眨眼、注视和/或眼睛扫视。可以进一步理解的是，眼部事件可以包括一个或多个眼部事件的序列（例如，一个或多个眨眼、注视和/或扫视的某种组合序列）。检测眼部事件的其他用例包括头部设备识别（例如，感知设备被戴在用户的头上并打开设备），残疾人的无障碍访问，以及眼睛健康等。

在一些实施方案中，头戴式设备可以包括被配置为监测与眼部事件相应的电脉冲的电极。例如，与电介质弹性体（DE）材料耦合的电极可以布置在身体特征周围，包括但不限于与鼻子接触和/或在鼻子上方、耳朵后面和/或周围、太阳穴，和/或任何其他适合检测和捕捉与一个或多个眼部事件或其他大脑相关事件以及神经活动有关的电脉冲的位置。

图源：patentlyapple

苹果公司的专利图1说明了一个用于检测眼部事件的系统的象征性硬件图；图2说明了一个用于检测眼部事件的系统的功能框图。

苹果公司的专利图3说明了在用户面部和头部周围位置的多个电极，用于检测眼部事件；图6A说明了一个示例电极配置，包括一个或多个处于非活动状态的元件，但可被激活以改善电极和组织之间的耦合，另外还有一个与电极共处的压力传感器；图6B说明了图6A的示例电极和压力传感器配置处于激活状态以改善电极和组织之间的耦合。

图源：patentlyapple

苹果公司的专利图7说明了电极信号的示例性信号处理；图10说明了一种降低功耗的眼动追踪方法。

想要了解更多专利细节，请查阅苹果公司的专利申请US 20230102507。

OpenXR Toolkit支持Meta Quest Pro眼动追踪注视点渲染功能

OpenXR Toolkit改善并增加了使用OpenXR开放标准API的PC VR游戏的功能。其中包括微软模拟飞行系列、《iRacing》《DCS World》的开放测试分支、《War Thunder》（虽然没有EAC）、Steam版的《Bonelab》《Hubris》《Everslaught》《Contractors》《The Light Brigade》和《A Township Tale》。

图源：uploadvr

眼动追踪注视点渲染是一种技术，通过这项技术中，用户的眼睛目前正在看的一小块区域是以全分辨率渲染的，其他部分以低分辨率呈现，实现性能优化。

从去年开始，OpenXR Toolkit已经支持Varjo Aero和Pimax的眼动追踪插件的眼动追踪式渲染。现在已更新支持Quest Pro。用户需要使用官方Link、Air Link或Air Bridge启用该功能，为了确保眼动追踪数据能通过Link传输，还需要在Oculus PC应用的Beta选项卡中启用该设置。

图源：uploadvr

该工具的开发者Matthieu Bucchianeri指出，在Oculus软件中会出现某些用户的眼动追踪功能无法启用的情况。如果出现这种情况，用户会在OpenXR Toolkit的日志文件中看到“xrCreateEyeTrackerFB() failed with XR_ERROR_RUNTIME_FAILURE”错误，此时应该向Meta报告问题。

好评如潮的解谜游戏《倾听画语/Behind the Frame》将推出VR版

《倾听画语: 最美好的景色》（Behind the Frame: The Finest Scenery）由中国台湾的游戏公司“晓数码”旗下的曙光工作室（Silver Lining Studio）开发，于2021年发售，登陆包括手机、主流游戏主机和PC平台，在Steam的好评率高达95%。

如今这款获得“好评如潮”的佳作宣布将推出VR版本，由美国游戏公司Akupara Games负责移植，预定在2023年内登陆Steam。

图源：Steam

《倾听画语》就像是一本生动的小说、一部可互动的电影，讲述一位追逐梦想的画家为了完成心目中的完美作品，不曾停下她的画笔。每一幅画都是一个故事，玩家藉由涂色、素描、修补绘画作品，拼凑画作与藏在其中的回忆。

库克一改前态，认为混合现实头显将有助于加速创造力

除了能沉浸探索精美的手绘动画世界外，游戏感人至深的剧情也是备受好评的一环。期待这些优点都能在VR版中发扬光大。

就在前不久，苹果首席执行官蒂姆·库克与GQ杂志展开了一场对话，对话涉及了苹果或将会在未来几个月内发布的头显产品。

一如苹果的保密风格，库克在对话中并未亲口证实或者否认这款头显的存在，但是库克阐明了一个很多人心中的疑问：为什么我们需要一款头显？

图源：网络

原因主要涉及四方面：艺术、交流、“创意”应用程序和企业环境。库克指出：“你可以用数字世界的东西覆盖物理世界，这可以极大增强人们的交流以及联系。”

值得一提的是，早些年库克在与GQ杂志的对话中对谷歌推出的AR眼镜表示了怀疑，当时库克提到：“我们一直认为眼镜从穿戴角度来看，它并非一个明智之举。它们具有侵入性，而不是像我们一直认为的那样，将技术推向后台......我们一直认为它会失败，实际上到目前为止它已经失败了。”

在本场对话中，库克承认了他的转变，并表示，“出现了新的东西表明你错了，承认它并继续前进，而不是继续蹲下来说你为什么是对的。”

在库克看来，创意用户是苹果商业模式的核心，他们将从虚拟现实产品中获益最多。例如，AR技术可以将一件艺术品投射到玻璃板上，以用于创意或教育用途。

库克指出，“这个想法可能比现实世界更好——将虚拟世界叠加在（现实世界）之上可能会打造一个更好的世界......或许它能加速创造力，它能帮助你做那些需要花费大量精力的事情，而你并没有真正考虑过以不同的方式做这些事情。”

斯坦福大学研发 AR 单片眼镜，可与 ChatGPT 实时交谈

近期，斯坦福大学学生开发了一款名为RizzGPT的工具，该工具利用 AI 和增强现实 (AR) 技术以帮助人们提高对话技巧。

图源：businessinsider

具体来说，RizzGPT 通过GPT-4语言模型生成聊天内容，然后输入AR单片眼镜，用户可以像看提词器一样实时阅读这些内容。该团队将这项技术称为“实时魅力服务” ，并认为它有许多潜在应用场景，能帮助人们公开演讲、工作面试，解决社交焦虑等。

根据 RizzGPT 团队的说法， 具有摄像头、麦克风和高分辨率显示屏的AR单片镜非常容易夹在任何一副眼镜上，还非常具有便携性。

该眼镜使用 Brilliant Labs 的 Monocle AR 技术创建的，进一步说明了 AI 和 AR 如何结合解决现实世界的问题，观察这项技术对未来或有一定影响。

《水果忍者VR2》将于4月6日上线Steam、Quest和PICO三大平台

知名游戏《水果忍者》背后的公司 Halfbrick 宣布发布其 VR 版续作《水果忍者 VR2》，它将于 4 月 6 日起在 Steam、Oculus 商店和 PICO 商店上架。

凭借直观易于学习的控件，以及全新的功能，《水果忍者 VR2》更适合 VR 初学者，有望比其前作更加精彩。

图源：alehandorovr

此外，凭借名为 “Fruitasia”的令人印象深刻的游戏场景，玩家将能够在切开水果和避开障碍物的同时，享受身临其境且具有强烈视觉冲击的体验。但这还不是全部，《水果忍者 VR2》还具有不同的游戏模式，例如街机和禅宗，以及“射箭”和“节奏”两种新模式，新的多人游戏中心还允许玩家与朋友联机并在迷你游戏中竞争。

关键词：