近日，美國專利商標局正式授予蘋果一項專利，該專利最初於 2020 年 4 月提交，涉及 Apple Vision Pro 的可能配件設備。更具體地說，一種獨特的虛擬觸控板配件，用戶可以在虛擬世界或遊戲中使用它來移動和/或與對象交互。
此外，系統可以具有投影系統，該系統將虛擬對象投射到物理環境中，例如，作為全息圖或物理表面上，以便用戶使用該系統感知疊加在物理環境的虛擬對象。
蘋果專利指出，如今，與虛擬對象交互的技術對用戶來說可能很麻煩且不直觀。蘋果的發明涵蓋了遠程觸摸檢測技術，包括放置在物理表面上（如桌子頂部）的外圍設備。使用這些技術，用戶可以通過在物理表面上通過觸摸來與虛擬對象進行交互。
該系統將使用圖像傳感器來追蹤顯示器相對於物理環境中一個或多個固定對象的位置和方向。在一些實施例中，系統使用朝內（例如，面向用戶）的圖像傳感器進行注視追蹤和/或手部運動追蹤，其可用於例如控制用戶的化身。
此外，該系統可以具有投影系統，將虛擬對象投射到物理環境中，例如，作為全息圖或物理表面，使得體驗該系統的用戶感知疊加在物理環境上的虛擬對象。
蘋果專利圖 1A-1B 描繪了用於各種 CGR 技術的示例性系統；圖 2 說明了包括頭戴式顯示設備和用於實現遠程觸摸檢測的外圍設備系統示例。
更具體地說，蘋果專利圖 2 說明了系統 #200，包括外圍設備 #200A和頭戴式顯示器（HMD）設備 #200B。
外圍設備包括攝影機傳感器 #210（例如，圖像傳感器 #108）和運動傳感器（例如，方向傳感器 #110）。此外，HMD 設備 #200B 本身可以是系統 #100 的一個實施例。
蘋果的系統 #200，包括外圍設備 #200A 和 HMD 設備 #200B，可在桌面或通用桌面 #206 上進行精確的遠程觸摸檢測，以便在使用 HMD 設備顯示的 CGR 環境中與顯示的 UI 元素進行交互（例如，控制、操作、激活、選擇）。
在一些實施例中，系統 #200 形成一個三角度系統（例如，外圍設備 #200A 上的一個攝影機傳感器和 HMD 上的兩個攝影機傳感器）。
在一些實施例中，系統 #200 包括外圍設備 #200A（例如，沒有攝影機傳感器），其發射紅外光以被 HMD 上的攝影機傳感器檢測。
在一些實施例中，系統不包括外圍設備，並依賴於 HMD設 備使用深度傳感技術執行遠程觸摸檢測。
蘋果專利圖 3 說明了提示用戶更正錯誤條件的通知示例；圖 4-5 說明了 CGR 環境中遠程觸摸檢測的示例。
此外，蘋果專利圖 3 說明了用戶通過 HMD 的透明或半透明顯示屏查看 CGR 環境的角度。在一些實施例中，HMD 的顯示是不透明的，因此用戶使用透視影片查看物理環境。
蘋果專利圖 6 和 7 說明了 CGR 環境中遠程觸摸檢測的其他示例。在這裡，你可以看到用戶如何使用虛擬觸控板通過簡單的手勢將照片橫向移動到直立。
蘋果專利圖 11-12 說明了由頭戴式顯示設備和外圍設備組成的系統的替代示例，用於通過紅外發射器而不是攝影機進行遠程觸摸檢測以檢測物體。
