长推：WWDC23 Keynote即将到来，3分钟速览核心看点

互联网阅读 1007 2023-06-05 17:15:00

注：原文来自@dexteryy发布长推。

明天晚上就是万众瞩目的「XR 春晚」——WWDC23 Keynote 了。我印象中，上次出现这种 Apple 发布全新产品线之前外界就传闻已久议论纷纷期待满满的情况，还是 07 年发布初代 iPhone 的 Macworld 大会（WWDC 前身）。以下是我推荐的重要看点（按重要程度排序）：

1. 面向消费市场、基于成熟技术（VR、Video Passthrough、pancake 光学等）实现全面能力、good enough 的用户体验和实用性的苹果 MR 头显（Reality Pro），能否打破始于 Oculus/Meta 的「元宇宙诅咒」，让 XR 设备的 installed base 首次扩展到那些不向往纯虚拟世界、觉得《头号玩家》的世界是反乌托邦、不玩游戏（non-gamer）或不玩轻度游戏（core gamer）、不喜欢从现实世界「逃离」、不愿跟现实世界隔绝的用户群体，带领 XR 行业走上继 PCVR、一体机 VR 之后的第三增长曲线，全面启动非游戏 XR 应用、MR 应用生态的发展。

2. 从 iPad 获得了整套大屏（横屏）2D 应用生态的苹果 MR 头显，能在多大程度上取代平板电脑的使用场景。

XR 近远场交互在效率、舒适度等方面能在多大程度上让用户摆脱实体屏幕。

2D 应用在 xrOS 里是否会得到自动的 3D 增强（包括苹果是否会提供相关 API）。

还要关注 2D 应用的文字输入解决方案、多任务能力、跟现实环境结合的能力。

最后，2D 应用生态能独立支撑起多少苹果 MR 头显的使用场景。

3. 市面上现有的 XR 产品无一例外都依赖 Unity 等传统 3D 游戏引擎来支持原生 XR 应用开发。不走这条独木桥、把「GUI 开发框架」作为企业基因和立身之本之一的苹果，这次发布的 XR/3D 应用开发框架（RealityKit）会提供怎样的抽象、架构、API 风格、组件体系、开发者工具和开发者体验。

会针对非游戏场景提供哪些 UI 设计模式和人机交互规范。

4. 在 Open Web 方面声名狼藉的苹果，在第一代苹果 XR 平台里，能保留或发展多少 Web 能力和 Web 生态。

iOS/iPadOS 上基于 Web Clips 图标和 http://Web.app 容器的半吊子 PWA 支持，能否在 xrOS 上作为 2D 应用生态的一部分得到继承或完善。

既是 2D 应用之一又是 Web 平台入口之一的 Safari，在 xrOS 上会得到哪些深度系统集成，会不会有 UI 改进。

会不会支持 WebXR Device API、MR 相关 WebXR API、WebGPU。

会不会提供「2D 开发 + 3D 增强」的新 HTML/CSS API。

会不会支持第三方浏览器使用自有引擎。

5. 是否会包含传说中的「AI Mesh」，把基于 Apple Home 的 IoT 体系、苹果系的计算设备、可穿戴设备，在 MR 空间中紧密结合起来，让这些设备的传感器和边缘计算能力，成为 MR 头显上传感器和计算能力的补充，在 MR 头显让 AI 能获得 3D 现实环境的数据、拥有「see」能力和一定理解能力（图像分割和对象识别）的基础上，进一步实现「see in the dark」能力和更深度的理解（设备的状态和控制）。

会利用这种多设备、网络化、AI 增强的协同，实现哪些新的人机交互和应用场景。

反过来，MR 头显上的多少能力和用法，会「跨平台」的在 iPhone/iPad/Mac 上同时提供。

6. 苹果 MR 头显的多模态交互中，输入方式除了朝向、位置、裸手和凝视，基于 LLM 的语音输入会起到多大作用，跟其他模态如何协同。

能实现多少粗粒度的自动化操作，能打通多少 2D 和 XR App（含 Web）。

作为交互中的输出方式，xrOS 的 GUI 会不会实现多模态，结合语音或自然语言。比如虚拟拟人助手，会话式信息流。

原有的 Spotlight（全局搜索）、Siri、相机/扫一扫（Visual Search）和主动推送（通知中心、动态岛）等「App Unbundling」用法会不会在 xrOS 环境（3D 空间 + LLM）中有重大发展。

7. 会不会在分体式腰部电源（头显减重）、可替换电池、无手柄等要素的支撑下，实现无边界的、户外的 MR 使用场景，实现「Planet-Scale AR/MR」。