近日，歐洲專利商標局公布了蘋果的一項專利申請，該專利申請在技術上涉及具有一個或多個顯示器生成組件的電腦系統和一個或多個提供電腦生成體驗的輸入設備，包括但不限於通過一個或多個顯示器提供VR 和 MR體驗的電子設備。實際上，蘋果的專利深入到為蘋果未來 XR 頭顯用戶提供使用各種手勢來控制或移動用戶在 AR/VR/MR/XR 環境中看到物體的能力，這些物體使用來自注視追蹤系統的注視輸入。頭顯或頭顯上的攝影機使用深度映射來區分手勢。
蘋果在其專利背景中指出，與至少包含某些虛擬元素（如應用程序、AR 環境、MR 環境和 VR 環境）的環境進行交互的方法和接口是繁瑣、效率低下且有限的。
例如，為執行與虛擬對象相關的操作提供反饋不足的系統、需要一系列輸入才能在AR環境中實現預期結果的系統，以及虛擬對象操作複雜、乏味且容易出錯的系統，都會給用戶帶來巨大的認知負擔，並降低VR/AR環境的用戶體驗。此外，這些方法浪費了許多時間，從而浪費能源，後一種考慮因素在電池供電設備中尤為重要。
在一些實施例中，電腦系統可以根據在用戶手部運動期間保持的握力類型或手部姿勢來區分用戶的手部運動。握持的類型或手部姿勢是根據手指在各自手上的位置、各自手的方向、形成握力的手的數量、形成握手的手的相對位置和方向，或上述兩種或多種的組合等來區分的。
在一些實施例中，一旦選擇了目標位置或錨點位置，如果可移動的虛擬對象存在於目標位置或錨點位置，如果用戶的手在手部運動期間處於第一類型的握持狀態，則電腦系統將用戶的手部運動識別為相對於三維環境（並且相對於用戶的虛擬位置或當前顯示的三維環境的視圖的視點）移動虛擬對象的請求；如果用戶的手處於不同於第一種握持的第二種握持方式，則電腦系統將用戶的手部運動識別為相對於虛擬對象（以及相對於三維環境）移動視點的請求。
在專利圖中 2 中，我們看到一個框圖，其中說明了電腦系統的控制器，該控制器配置為管理和協調用戶的 CGR 體驗。下面的控制器 #110 包括軟體、固件和/或硬體的合適組合；圖 7A-7D 說明了選擇導航目標並根據物理手勢導航到導航目標的過程。
蘋果專利圖 7E/F/H/I 說明了根據用戶在一系列用戶輸入期間保持的手勢，有選擇地相對於三維環境（和視點）移動虛擬對象或相對於三維環境（以及三維環境內的所有虛擬對象）移動視點。
