近日，美國專利商標局公布了蘋果公司的一項專利申請。該專利涉及使用未來的 Apple Pencil 與 MR 頭顯、iPad 或 Mac 顯示器來對用戶界面進行互動和操作，而這款未來的 Apple Pencil 可用作 VR 遊戲控制器，來控制虛擬代理（如遊戲角色）或管理與實際物體的互動。同時該專利還涵蓋了通過使用注視控制來管理物體的移動。
通過蘋果的專利圖 1 和 6B 中可知，在用戶手持 Apple Pencil 的情況下，Apple Pencil 被用作遊戲控制器以移動物體的位置或控制遊戲角色，蘋果將其稱為「虛擬代理#606」。Apple Pencil 的功能將包括涉及在設備的觸摸表面上敲擊、滾動、旋轉、輕彈和刷動的輸入。
Apple Pencil/控制設備#130包括一個或一組傳感器，根據與觸摸敏感表面#175 的觸覺和/或觸覺接觸，檢測用戶的輸入。在一些實施方案中，Apple Pencil/控制設備包括多種觸摸傳感技術中的任何一種，包括但不限於電容式、電阻式、紅外線和表面聲波技術，以及其他接近傳感器陣列或其他用於確定與觸摸敏感表面的一個或多個接觸點的元件。
在該專利的另一半中，蘋果詳細介紹了使用眼睛/注視追蹤作為在 XR 環境或遊戲中移動物體的手段。
蘋果的專利圖 5A 是一個示例內容交付架構的第一部分框圖，而圖 5C 是該示例內容交付架構的第二部分框圖，圖 5B 則說明了示例數據結構。
