近日,Niantic 宣布其最新版本的 Spatial SDK(v3.15)已正式全面支持 Meta Quest 3 和 Quest 3S 頭顯。
此次 Niantic Spatial SDK 3.15 能夠實現對 Quest 3 和 Quest 3S 的支持,背後離不開 Meta 開放第三方 Horizon OS 應用對 Quest 3 及 3S 透視攝影機的訪問權限。
其中,Niantic 的 VPS 技術利用電腦視覺算法,將攝影機實時捕捉的畫面與高精度的三維地圖進行精準匹配。在覆蓋的區域內,它能夠實現令人驚嘆的厘米級定位精度,這意味著虛擬物體可以極其精準地放置在現實世界的特定位置。
目前,Niantic 的 VPS 地圖已經覆蓋了全球超過百萬個地點,這一地圖數據主要由《Pokémon Go》和 Scaniverse 玩家的掃描數據構建而成。值得一提的是,Niantic 在 VPS API 調用方面採用了靈活的計費模式:每月前 1 萬次 VPS API 調用免費,此後按每次約 0.01 美元計費。
在場景重建方面,與 Meta 原生 Depth API 僅支持約 4 米的室內掃描範圍相比,Niantic 提供的長距離實時網格化功能能夠完美適用於室外環境,並且與 VPS 形成了良好的互補關係。
該系統通過透視攝影機實時捕捉的畫面,直接生成動態網格,無需提前進行繁瑣的手動掃描。這一特性使得它能夠輕鬆應對環境變化帶來的挑戰,避免了因環境改變而導致的交互失真問題。例如,在城市街道中,樹木的搖曳、行人的走動等動態變化都不會影響場景的準確重建和虛擬物體的穩定交互,為開發者在室外場景下開發 MR 應用提供了更加可靠和靈活的技術支持。
除了上述功能外,SDK 還支持實時語義分割與物體識別,能夠準確地標註不同物體與表面的類別。通過這種精準的識別和標註,虛擬物體與真實環境之間的交互精度得到了顯著提升。
例如,在一個虛擬購物應用中,系統可以識別出真實的貨架、商品等物體,並讓虛擬的商品資訊準確地顯示在對應的真實商品旁邊,實現更加自然和流暢的交互體驗。在本地電腦視覺功能的計費方面,Niantic 採用了按月活躍用戶(MAU)計費的方式,每人每月約 0.10 美元,且不限調用次數。
Niantic 表示,將繼續加大研發投入,擴展對更多頭戴式設備的支持,不斷提升 SDK 的性能。同時,還將引入增強遮擋與持久化場景理解等新特性,進一步豐富 MR 應用的功能和體驗。
值得一提的是,Niantic 非常重視開發者的反饋意見,明確表示開發者反饋將直接影響產品的疊代方向。