为Apple MR而生，xrOS有何期待？

Apple 全球开发者大会 (WWDC) 是 Apple 公司一年一度面向开发者和软件的活动，与往年一样，预计 Apple 将宣布对其所有操作系统进行重大更新。作为 WWDC 2023 的独特之处，Apple 也很有可能推出 xrOS，该操作系统将运行在传闻已久的 Apple MR 头显之上。

(资料图片仅供参考)

图源：macrumors

一、xrOS符合Apple命名规则

Apple 尚未公开承认其头显的存在，但 Apple 内部消息人士证实，该操作系统将被命名为 xrOS，并且 Apple 已使用空壳公司在各个国家注册该商标。

‌xrOS‌ 的前两个字母代表“扩展现实”，暗示了头戴式设备核心的增强现实和虚拟现实功能，OS 的大写也符合 Apple 操作系统通用的命名规则。

据 Mark Gurman 的消息，Apple 将头显视为玩游戏、观看流媒体视频、视频会议、健康、健身和社交的多元设备。因此，‌xrOS‌ 将专注于为这些内容的交付提供最佳底层环境。

图源：macrumors

二、xrOS交互，高度自定义

‌xrOS‌ 被认为是具有类似 iOS 的界面， iPhone 和 iPad 的用户会很熟悉，但会以全新的方式呈现给他们，并与之交互。

我们期待一个包含应用程序和可定制小部件的专用主屏幕，所有的这些都可以重新排列，在每英寸高达 3,000 像素的双 4K Micro-OLED 显示器上观看，以提供丰富、逼真的和身临其境的观看体验。

xrOS‌ 甚至可以将 AR 应用程序界面元素投影到现实世界中的实际对象上，以获得混合现实叠加效果。

头显的佩戴面和正面共配备了十几个光学摄像头，用户有望通过注视屏幕上的项目来选择它（注视点交互），并使用捏合等手势来激活屏幕上的该项目（手势交互）。

据说 Apple 还在开发一种空中打字功能，预计在发布时还处于雏形，相信伴随着时间的推移，Apple 会做出显著的改进。

三、重构版Apple应用，外加独特MR内容

‌xrOS‌ 的核心将是重构版的 Apple 应用程序，如 Safari、照片、消息、地图、Apple TV+、Apple Music、播客、提醒和日历，以及为头显定制的 FaceTime 应用程序。地图应用程序也将具有，并可能结合 Apple 的一些环顾四周和地标功能（AR+LBS 技术），允许用户探索世界各地的城市。

预计 Apple MR 头显将拥有诸多可安装使用的 APP。xrOS‌ App Store 将托管专为头显制作的应用程序，以及现有的 ‌App Store‌ 内容。据传，Apple 还在为头显的 3D 界面调整 iPad 的应用程序。

图源：macrumors

此外，Apple 还着手将多项现有的服务和应用程序转变为身临其境的观看体验。例如，用户将能够在虚拟现实环境中观看视频，就好像他们正在看一个巨大的屏幕，或者伴随着身临其境的视觉、音频和画外音，从而引导冥想。

据称在 ‌xrOS‌ 中提供截然不同体验的一些应用程序和服务包括 Apple Fitness+、‌Apple TV+‌（专注于观看 MLB 和 MLS 等体育内容），以及 Apple 的协作 Freeform 工具的 3D 版本。至于 ‌FaceTime‌，由于头显预计将配备眼动追踪+面部追踪等 摄像传感器，因此一对一聊天将具有逼真的虚拟化身，可以模仿用户的实际面部表情和身体动作。

Apple 还开发了一款用于在虚拟现实中阅读的图书应用程序、一款专注于心理健康的健康应用程序，以及一款可以从头显摄像头拍摄图像的相机应用程序。

四、三方游戏与用户自创建AR内容

为了让人们购买 MR 头显，Apple 需要让用户相信软件体验是具有价值的，这不仅需要引人入胜的第一方体验，还需要开发人员提供创新的第三方应用程序。

据报道，游戏将是一个重点，苹果一直在与一些游戏开发商合作，帮助他们更新现有的混合现实内容，但据报道，苹果也有一套强大的工具可供非开发者创建他们自己的 MR 体验。一份报告指出，用户将能够使用 Siri 作为助手为头显创建和发布 AR 应用程序，即使他们没有编码能力。

图源：macrumors

该报告将 Apple 的工具比作 Minecraft 和 Roblox，它们允许任何人轻松创建 3D 工具和世界。据说苹果公司正在利用它于 2017 年从蒙特利尔初创公司 Fabric Software 收购的技术，用户将能够与开发人员一起在 App Store 上分发他们创建的 AR 应用程序。

值得注意的是，该报告援引的消息人士最后一次看到该工具的演示是在 2021 年，因此该报告是基于较早的信息，而且 Apple 的计划可能在此后的时间里发生数次改变，仅供参考。

五、xrOS什么时候到来？

Apple 的 MR 头显软件开发工具可能会在 ‌WWDC 2023‌ 上亮相，让开发人员有时间在头显发布前为头显创建 AR 和 VR 应用程序。从这个意义上说，在头显正式向公众发布之前，我们不会看到完整版的 ‌xrOS‌，而且预计要到今年晚些时候才会出现。

SenseGlove推出Nova 2触觉反馈手套

近日，VR/AR触觉技术提供商SenseGlove公布了其最新触觉手套产品Nova 2。据了解，新手套配备了主动接触反馈功能，即通过限制手指的运动从而模拟抓握的感觉，该功能是力反馈技术的有效补充，可以还原更为真实的触觉模拟体验。

新手套不仅把触觉反馈引入了手指，它还对于手掌区域进行了针对性设计，如可以模拟握手、挤压或打破玻璃杯等感觉。

SenseGlove指出，新设备将会在虚拟培训、研究以及多人社交场景中提供更为真实的体验，并改善用户与数字世界的互动方式。

据了解，Nova 2将于2023年第四季度开始发货，售价为5999美元。在本周5月31日-6月2日举办的AWE展会期间，SenseGlove还会做相应的产品演示。

图源：SenseGlove

Virtual Party成立公司，支持以VRChat为基础的TRPG+VR桌游活动

Virtual Party于2023年5月22日完成注册并开始运营，这是一家可支持在VR空间中进行TRPG和桌游的公司。该公司开发了VRTRPG支持系统“CatsUdon”，该系统可在VRChat中运行，其团队还运营着Discord社区“CatsUdon Workshop”。

图源：Virtual Party

CatsUdon除了提供TRPG所需的基本系统外，它的特点是可以自由创造一个3D的“TRPG世界”，通过自由调用空间、建筑、物品和怪物等创建游戏舞台。CatsUdon的目标是“与所有TRPG模组兼容”，包括经典的“克苏鲁神话TRPG”“龙与地下城”等等，它也可被用来体验剧本杀，棋盘桌游和其他角色扮演体验，其场景还能作为各种虚拟活动的场所和VTuber的活动布景。

The CatsUdon Workshop是官方为玩家组织的Discord社区服务，全天候为玩家提供可举行自由会谈的虚拟空间，且每周四都会举办针对新手玩家的“CatsUdon Day”，目前CatsUdon Workshop已有近1000名会员。

Wisear和DigiLens宣布建立战略合作伙伴关系

近日，AR设备制造商DigiLens宣布与神经接口技术开发商Wisear达成合作，未来DigiLens最新AR眼镜产品ARGO将会与Wisear的耳机产品相结合，从而为用户带来更为多样化的交互方案。

此前，Wisear开发了一款配备了神经接口技术的耳机，耳机配备了EarEEG以及AI技术，可以检测脑部以及面部部分信号，从而转化为控制指令。

公告指出，通过整合双方的技术，使得眼镜用户能在更为苛刻的环境下使用XR设备，如现场服务人员无需操作按钮即可访问关键信息，从而提高安全性以及工作效率。

据了解，DigiLens与Wisear的合作解决方案将会在今年AWE大会期间展出，并有望在2024年推出。

图源：DigiLens

Strivr将通过生成式AI和VR技术升级沉浸式培训体验

Strivr是一家VR培训解决方案初创公司，该公司宣布将利用生成式AI来改变沉浸式学习体验。

图源：Strivr

沃尔玛曾与Strivr公司合作，将VR技术引入他们的培训设施。据悉，2019年，近140万沃尔玛员工为黑色星期五的营销节日接受了VR培训。而该公司的员工报告中指出员工满意度提高了30%，测试成绩提高了70%，知识保留率提高了10-15%。由于VR培训的成功，沃尔玛将VR培训项目扩展到了全国的所有门店。

除了企业员工培训，Strivr与Reulay和Healium合作，在VR培训平台上推出关于改善心理健康的应用程序。缓解员工职业倦怠、抑郁和焦虑的问题。Belch还表示Strivr已与某家大型金融机构达成合作，在其工作场所提供冥想活动，提高员工的生产力、注意力和协作能力。

为了加强其VR培训平台，Strivr采用了生成式AI来开发场景，优化动画和3D资产创建，并优化视觉和内容驱动的功能。生成式AI还将从用户数据中作出分析，帮助HR和L&D领导者进行关键决策。

苹果新专利：未来iPad可通过多功能按钮控制3D环境中的虚拟对象

近日，美国专利商标局公布了苹果公司的一项专利申请，该专利涉及一种新的iPad更新按钮，该按钮涉及一个或多个虚拟对象在三维环境中的空间排列。这个新的多功能按钮实际上可能是苹果公司Digital Crown（数字表冠）在iPad上的新应用。

在一些实施例中，一个电子设备能够一起更新多个虚拟对象的位置。

在一些实施例中，一个电子设备根据三维环境中地板的估计位置显示三维环境中的对象。

在一些实施例中，电子设备在三维环境中移动（例如，重新定位）对象。

图源：patentlyapple

苹果公司的专利图2是一个框图，说明一个计算机系统的控制器，该控制器被配置为管理和协调用户的XR体验。

苹果公司的专利图3是一个框图，说明计算机系统的显示生成组件，该组件被配置为向用户提供XR体验的视觉组件。

苹果公司的上述专利图7B说明了一个例子，即iPad如何通过简单地按下一个新的iPad多功能按钮来更新一个或多个虚拟对象在三维环境中的空间排列，如上图#703所示。该按钮可能是苹果的数字表冠的另一种用途，该表冠已经应用在苹果手表、AirPods Max耳机上，据说也将用于即将推出的XR头显上。

苹果公司指出，在检测到用户按下按钮#703a的时间小于阈值时间段（例如，0.1、0.2、0.3、0.5、1或2秒）时，iPad显示一个主用户界面（例如，iPad操作系统的用户界面），在检测到用户按下按钮#703的时间大于阈值时间段时，iPad使三维环境#702重 新居中。

在一些实施例中，iPad与被配置为能够检测用户按压表盘或转动表盘的冠状物或表盘通信。在一些实施例中，响应于检测到用户转动转盘，iPad根据转盘转动的方向和幅度，更新虚拟对象（例如，用户界面#704和#706，表示#708和#710）相对于三维环境的其他部分的视觉强调级别。