近日，德國專利商標局公布了蘋果一項 3D 環境定位內容呈現專利，涵蓋提供 3D 環境視圖的設備、系統和方法。內容可以為交互式或非交互式的，並可通過 3D 環境視圖虛擬螢幕以呈現。
螢幕內容的一部分可以呈現在虛擬螢幕上，並且螢幕外內容部分（前景、角色、某些對象）可以在該虛擬螢幕的前面以 3D 形式呈現或者向上/下/左/正好越過虛擬螢幕的邊界。
螢幕上的部分可以是立體的，因此仍然具有 3D 外觀。螢幕外內容的 3D 外觀可以由其定位在虛擬螢幕前面或後面的 3D 位置來確定。邊界可能會被突出顯示，例如，可能會出現房間裡的恐龍走向觀眾。
確定內容的哪些部分在螢幕上以及哪些部分在螢幕外可以在運行時預先確定，例如基於跨越邊界的角色。例如，確定何時顯示螢幕上內容而不是螢幕外內容可以基於追蹤恐龍何時越過輸入上的特定邊界、用戶注視/位置、場景理解等。
在一些實施方式中，可以在一個或多個不同的視圖集合中提供虛擬內容以改善用戶體驗（例如，當佩戴頭戴式顯示器時）。一些實施方式允許與虛擬內容交互（例如，應用程序小部件）。
在某些實施方式中，設備（手持設備、筆記本電腦、台式機或蘋果 Vision Pro）為用戶提供 3D 環境的視圖（例如視覺和/或聽覺體驗），並通過傳感器的注視特徵獲取生理數據和運動數據與用戶的響應相關聯（例如通過控制器移動化身、頭部運動等）。
基於獲得的傳感器數據，該專利中描述的技術可通過追蹤用戶的一個或多個注視特徵和其他交互來提供用戶在觀看 3D 環境（擴展現實環境）期間的前庭信號（例如，用戶在物理環境中的移動）。
基於前庭信號，所述技術可以識別與虛擬內容的交互，並提供另一組視圖以改善用戶在觀看 3D 環境期間的體驗。
蘋果專利圖 1 示出了示例性物理環境 #100。圖 1 展示了在物理環境空間中運行的示例電子設備 #110（Apple Vision Pro）。在此示例中，該空間包括螢幕 #120，該螢幕 #120 可為物理結構或物體，或者螢幕 #120 也可代表牆上的區域或表面，Vision Pro 可在其中向用戶顯示內容。
蘋果專利圖 6D 示出了將內容 #210 的不同部分定位在後壁的有限平面區域的前面。例如，諸如背景或中間基底的一些內容可以繼續在有限平面區域上呈現，並且諸如前景內容（例如，離屏內容）的其他內容可以被呈現為好像它從後壁的有限平面區域出來一樣。
