在今年的 WWDC23 上宣布 Apple Vision Pro 期間，蘋果推出了一項名為 Eyesight 的特定功能。蘋果指出：「Apple Vision Pro 可幫助你與周圍的人保持聯繫。EyeSight 會展現你的眼睛，並讓附近的人知道你何時使用應用程序或完全沉浸在體驗中。當有人走近時，Apple Vision Pro 同時讓你看到這個人，並向對方展示你的眼睛。」
從技術上講，蘋果公司的 Mike Rockwell 這樣描述 Eyesight：「我們還認真考慮了其他人在佩戴 Vision Pro 時如何與你互動。Eyesight 利用獨特的弧形OLED 面板和光柵透鏡，將你眼睛的正確視角投射到每個注視你的人身上。結果是 3D 顯示屏，使設備看起來透明。」
近日，歐洲專利局公布了微軟一項新專利，標題為「控制電腦生成的面部體驗」。
微軟指出，他們的發明涉及顯示電腦生成的面部表情。其中一個示例提供了一種顯示電腦生成的面部表情的方法。該方法包括接收表情數據，以及至少基於表情數據為用戶的眼睛區域生成一個或多個面部表情。該方法還包括在頭戴式設備的外向顯示器上顯示眼睛區域的一個或多個面部表情。
微軟專利圖 11A 和 11B說明了一個示例場景，其中激活頭戴式設備上的外部顯示屏，並在顯示屏上打開電腦生成的面部表情，特別是在眼睛區域。
微軟專利圖 12 顯示了一個示例頭戴式設備的框圖，該設備被配置為顯示電腦生成的面部表情；圖 13 示出了顯示電腦生成的面部表情的示例方法的流程圖。
該專利中公開的示例涉及利用包含一個或多個面部追蹤傳感器的面部追蹤系統，來控制電腦生成的面部表情的顯示。
此外，從每個面部追蹤傳感器接收隨時間變化的數值，並且基於接收到的數據確定每個面部追蹤傳感器的數值範圍，該數值範圍包括在一段時間內（例如在滾動時間窗口內）接收到的最小值和最大值。對值範圍和接收傳感器值進行處理，以將接收的傳感器值轉換為混合形狀映射，其中混合形狀映射對應於值範圍內傳感器值的位置。
然後，至少基於混合形狀映射確定表達式數據，並將其提供給一個或多個設備進行呈現。以這種方式，一組面部追蹤傳感器可以共同用於感知用戶表情的整體近似值，從而控制以化身形式呈現的表情。化身可以呈現給傳感器設備用戶以外的其他人。這可能有助於 AR 和/或 VR 環境中的人際交流。
此外，在 2022 年 8 月，Meta 的一項專利申請也顯示該公司正在開發一種在頭顯設備中查看用戶眼睛的方法，如下圖專利所示。
