近日，美國專利商標局正式授予蘋果一項與電腦生成的現實環境有關的 Apple Vision Pro 專利，包括在電腦生成的現實環境中多模態輸入。雖然錄製空間影片最初將由頭顯頂部的按鈕觸發，但蘋果專利還顯示，在未來，指定的面部表情可能會觸發事件的錄製，例如體育賽事。
蘋果在其專利背景中指出，AR 技術旨在通過提供增強的物理環境並增強電子資訊，來彌合虛擬環境和物理環境之間的差距。因此，電子資訊似乎是用戶所感知的物理環境的一部分。在示例中，AR技術進一步提供了一種用戶界面，以與覆蓋在增強物理環境中的電子資訊進行交互。
蘋果專利主題技術的實現至少部分地基於電子設備是否與相關基礎設備通信耦合來確定電子設備的操作模式。基於確定的操作模式，該主題技術識別用於啟動電子設備的視野內的內容記錄的一組輸入模態。
該主題技術監控由包含在電子設備中或與之通信耦合的至少一個傳感器生成的傳感器資訊。
此外，當被監測的傳感器資訊表明至少一組已識別的輸入模式之一已被觸發時，該主題技術開始記錄電子設備視野內的內容。
Apple Vision Pro可能包含可以接收用戶輸入的硬體元素，例如硬體按鈕或開關。此類傳感器和/或硬體元素檢測到的用戶輸入對應於用於從應用內發起共存會話的各種輸入模式。
例如，這種輸入模式可以包括但不限於面部追蹤、眼動追蹤（例如，凝視方向）、手部追蹤、手勢追蹤、生物特徵讀數（例如，心率、脈搏、瞳孔擴張、呼吸、溫度、腦電圖、嗅覺）、識別語音或音頻（例如，特定的熱詞）以及激活按鈕或開關等。
蘋果專利圖 3B 和 3C 說明了根據該主題技術的實現來追蹤注視方向，以啟動電腦生成的現實記錄的示例；圖 4B 和 4C 說明了在電腦生成的現實環境中確定感興趣區域，並根據感興趣區域啟動記錄的示例；圖 5B 和 5C 說明了根據該主題技術的某些實現向電腦生成的現實環境中的各種對象或實體提供注釋的示例。
蘋果專利圖 6 說明了在Apple Vision Pro視野內啟動內容錄製的示例過程流程圖。
