近日，美國專利商標局公布了蘋果公司的一項專利申請，涉及檢測提供鏡面映像、修改映像或提供描繪此類表面和映像內容的系統、方法和設備。更具體地說，蘋果的專利描述了佩戴 HMD 的用戶如何將現實世界中手持的 iPhone 變為遊戲中的裝備，如遊戲中的光劍。專利中提供了其他示例，也許蘋果開發人員會更欣賞。
根據蘋果的說法，本發明的各種實施方案包括檢測鏡子、玻璃、液體和其他表面以及這些表面中映像的設備、系統和方法。一些實施方案涉及檢測用戶或用戶設備在表面上的映像，並提供虛擬內容來增強或替換提供給用戶的內容中的映像外觀。
例如，可以修改環境的視圖，以包括用戶的映像，但不包括用戶持有或佩戴的電子設備。
在另一示例中，可以修改環境，以便虛擬內容，如較新版本的電子設備或虛擬光劍，在映像中替換電子設備。
在另一示例中，可以修改環境，以便虛擬內容（例如虛擬化身）替換映像中的用戶。
該方法還可以涉及識別替換內容，以替換用戶或電子設備映像的至少一部分。在某些實施方案中，替換內容包括用戶身體的一部分（例如手、手臂等）或背景內容，當手持移動設備被擦除、增強或以其他方式修改時，這些內容將可見。
在某些實施方案中，替換內容包括用戶身體的一部分（例如手臂、衣服等）或背景內容，當腕上設備被擦除、增強或以其他方式修改時，這些內容將可見。
在某些實施方案中，替換內容包括用戶頭部的部分（例如臉頰、眼睛、眉毛、頭髮等）或背景內容，這些內容將在頭戴式設備（HMD）被擦除、增強或以其他方式修改時可見。
在蘋果專利圖 4 和 5 中，我們看到蘋果將如何允許用戶在現實世界中持有的設備轉換為另一台設備，例如 CGR 環境中的光劍。在圖 5 中，儘管在現實世界中用戶佩戴的是 HMD，但在 CGR 環境中，HMD 被替換為沒有佩戴 HMD 的用戶面部。
用戶的表情由位於頭顯內的攝影機捕獲的。蘋果進一步指出，例如傳感器（如攝影機）捕獲的眉毛、嘴巴、下巴和眼睛的表情可用於模擬用戶虛擬化身上的表情。
蘋果專利圖 6 說明了 HMD 設備 #120 的系統流程，用於檢測提供鏡面映像的表面，並提供 CGR 環境。HMD 設備使用一個或多個環境傳感器 #610（例如一個或多個攝影機）來捕獲、創建或提供物理環境 #100 的視圖 #130。
在專利的其他地方，蘋果指出，用戶可以查看並以其他方式體驗基於 CGR 的用戶界面，允許用戶選擇、放置、移動以及以其他方式體驗 CGR 環境並與之交互，例如通過手勢、語音命令、輸入設備輸入等。
最後，蘋果指出，基於投影的系統可能會採用視網膜投影技術，將圖形圖像投射到人的視網膜上。投影系統還可以配置為將虛擬對象投影到物理環境中，例如，作為全息圖或物理表面上。
