宅中地 - 每日更新
宅中地 - 每日更新

贊助商廣告

X

Quest v64未公開功能發掘:家具識別、手勢+手柄多模態交互

2024年04月18日 首頁 » 熱門科技

本月早些時候發布的 v64 版本更新為 Quest 3 帶來了透視的直通質量、外部麥克風支持和躺下模式。

但有 Quest 用戶注意到 v64 還帶來了更新日誌中未提及的兩個主要功能:Quest 3 上的家具識別以及能夠同時調用手勢以及手柄交互的能力。

 

Quest v64未公開功能發掘:家具識別、手勢 手柄多模態交互

 

 

Quest 3 會在混合現實設置過程中生成房間的 3D 網格,並且始終可以從此 3D 網格推斷牆壁、地板和天花板的位置。但直到 v64 之前,系統並不能識別這些網格究竟代表了什麼,如門、窗、家具和電視。用戶可以手動標記這些內容,但手動要求意味著開發者不能依賴用戶這樣做。

但在 v64 中,在混合現實房間掃描結束時,Quest 3 會自動在周圍標記帶有標籤的長方形邊界框,它可識別門、窗戶、床、桌子、沙發、柜子、電視等元素。

Quest 3 開發者可以使用 Meta Scene API 訪問這些邊界框,並使用它們自動放置虛擬內容。例如,可以在房間裡最大的桌子上放置一個桌面遊戲板,用門戶替換窗戶,或者在電視中投射遊戲畫面。

Apple Vision Pro 已經為開發者提供了一系列代表座椅和桌子表面的粗略 2D 矩形,但尚未提供 3D 邊界框。iPhone Pro 上的 RoomPlan API 可以實現 3D 邊界,但該 API 在 visionOS 中不可用。

 

Quest v64未公開功能發掘:家具識別、手勢 手柄多模態交互

 

 

v64 中 Quest 3 上的家具識別比 SceneScript 粗糙得多。例如,對於沙發,v64 會創建一個簡單的矩形長方體來封裝它,而 SceneScript 會為座椅區域和扶手生成單獨的矩形長方體,並為靠背生成一個圓柱體。SceneScript 可能需要比 Quest 3 目前的家具識別能力高得多的計算能力,而 Meta 僅將其作為研究,而不是近期功能。

自去年以來,Quest 開發者已經能夠嘗試同時使用手部追蹤和 Quest 3/Pro 手柄,並且從兩個月前開始,他們已經能夠將使用此功能的應用程序發布到 Quest Store 和 App Lab。

在 v64 中,Quest 家庭空間中添加了多模態模式,包括透視和 VR 模式。請記住,它僅適用於 Quest 3/Pro 手柄。

 

Quest v64未公開功能發掘:家具識別、手勢 手柄多模態交互

 

 

多模態可在手柄和手部追蹤之間實現瞬時轉換,不再延遲。用戶還可以一隻手拿著手柄,同時系統會持續跟蹤另一隻手,這能提高交互的易用性。這可能對網頁瀏覽、媒體觀看和更改設置很有吸引力,提供手柄的精度和觸感,同時讓用戶的另一隻手自由。

宅中地 - Facebook 分享 宅中地 - Twitter 分享 宅中地 - Whatsapp 分享 宅中地 - Line 分享
相關內容
Copyright ©2025 | 服務條款 | DMCA | 聯絡我們
宅中地 - 每日更新