在今年的 wwdc23 上官宣 apple vision pro 期间，苹果推出了一项名为 eyesight 的特定功能。苹果指出：“apple vision pro 可帮助你与周围的人保持联系。eyesight 会展现你的眼睛，并让附近的人知道你何时使用应用程序或完全沉浸在体验中。当有人走近时，apple vision pro 同时让你看到这个人，并向对方展示你的眼睛。”
从技术上讲，苹果公司的 mike rockwell 这样描述 eyesight：“我们还认真考虑了其他人在佩戴 vision pro 时如何与你互动。eyesight 利用独特的弧形 oled 面板和光栅透镜，将你眼睛的正确视角投射到每个注视你的人身上。结果是 3d 显示屏，使设备看起来透明。”
近日，欧洲专利局公布了微软一项新专利，标题为“控制计算机生成的面部体验”。
微软指出，他们的发明涉及显示计算机生成的面部表情。其中一个示例提供了一种显示计算机生成的面部表情的方法。该方法包括接收表情数据，以及至少基于表情数据为用户的眼睛区域生成一个或多个面部表情。该方法还包括在头戴式设备的外向显示器上显示眼睛区域的一个或多个面部表情。
微软专利图 11a 和 11b 说明了一个示例场景，其中激活头戴式设备上的外部显示屏，并在显示屏上打开计算机生成的面部表情，特别是在眼睛区域。
微软专利图 12 显示了一个示例头戴式设备的框图，该设备被配置为显示计算机生成的面部表情；图 13 示出了显示计算机生成的面部表情的示例方法的流程图。
该专利中公开的示例涉及利用包含一个或多个面部追踪传感器的面部追踪系统，来控制计算机生成的面部表情的显示。
此外，从每个面部追踪传感器接收随时间变化的数值，并且基于接收到的数据确定每个面部追踪传感器的数值范围，该数值范围包括在一段时间内（例如在滚动时间窗口内）接收到的最小值和最大值。对值范围和接收传感器值进行处理，以将接收的传感器值转换为混合形状映射，其中混合形状映射对应于值范围内传感器值的位置。
然后，至少基于混合形状映射确定表达式数据，并将其提供给一个或多个设备进行呈现。以这种方式，一组面部追踪传感器可以共同用于感知用户表情的整体近似值，从而控制以化身形式呈现的表情。化身可以呈现给传感器设备用户以外的其他人。这可能有助于 ar 和/或 vr 环境中的人际交流。
此外，在 2022 年 8 月，meta 的一项专利申请也显示该公司正在开发一种在头显设备中查看用户眼睛的方法，如下图专利所示。
