近日，歐洲專利局公布了蘋果公司一項專利申請，該專利描述了 EyeSight 的基本原理。該專利還涵蓋了實時社交智能等內容。
蘋果專利的一個方面涵蓋了一種方法，該方法基於以下至少一項來確定佩戴頭顯的用戶是否處於參與狀態：在用戶的近場場景中檢測其他人，確定用戶正在凝視其他人，並在用戶凝視其他人時檢測來自至少一個用戶或其他人的語音輸入。響應於確定用戶處於參與狀態，該方法包括在用戶處於參與狀態時放棄向用戶提供輸出。
在另一示例方法中，在向電子設備的用戶提供一個或多個輸出的同時，該方法包括基於以下方法確定用戶是否處於參與狀態：在用戶的近場場景中檢測人，確定用戶是否凝視著人，以及在用戶凝視人類時檢測來自至少一個用戶或人類的語音輸入。響應於確定用戶處於參與狀態，該方法包括在用戶處於參與狀態時向用戶提供一個或多個輸出。
蘋果專利圖 9 示出了用於確定佩戴 Apple Vision（HMD）用戶的實時社交狀態的系統。在某些示例中，在滿足兩個條件時，1）接收到語音輸入或話語，2）用戶正在凝視或與另一個人進行眼神交流。因此，如果分數滿足預定閾值，則狀態機可以從脫離狀態 #920 過渡到參與狀態 #930。從技術上講，這就是觸發 EyeSight 啟動並允許附近的人能夠看到用戶的眼睛或創建眼睛圖像的原因。
蘋果專利圖 10B 上面說明了當用戶與人類進行社交互動時，社交互動系統在擴展現實設備上的使用情況。
該專利的另一個方面涉及 Siri 如何與 Apple Vision Pro 用戶互動。在下面圖 11A 和 11B 的示例中，我們看到 Siri 可以發送文本消息，通知直接向用戶顯示。
在圖 11B 中，我們看到 Siri 的圖標存在。在某些示例中，雖然數字助理圖標 #1102 顯示在用戶佩戴的擴展現實設備的螢幕或顯示器上，但可以在用戶的近場場景中檢測到其他人#1106。如圖 11B 所示，在近場場景中檢測到人時，可以在螢幕上顯示圍繞人的正方形或矩形（#1104）。
除了在近場場景中檢測其他人之外，在擴展現實設備上實現的社交參與系統還可以確定用戶正在與人類進行眼神交流。如圖 11B 所示，為了表明用戶正在與人進行眼神接觸，該人和/或用戶的實時眼球運動可以顯示在擴展現實設備的螢幕上。
