近日,Meta 為其在線狀態平台Presence Platform添加了沉浸式音頻功能。沉浸式音頻工具「XR Audio SDK」旨在使開發人員能夠輕鬆整合空間化、更本地化的聲音。目前,它僅適用於在 VR 中廣泛使用的Unity Engine,計劃在未來為 Unreal、Wwise 和 FMOD 等提供服務。
Presence Platform 是開發工具和編程接口的集合,可通過 Quest 2 和 Quest Pro 實現手部和語音交互,以及 AR 功能。
沉浸式音頻工具的應用領域是 VR、AR 和 MR,可以在幾乎所有獨立的移動 VR 設備以及 PCVR (SteamVR 等)和其他設備上運行。
XR Audio SDK更好地考慮頭部、外耳和軀幹的過濾效果,這些效果強烈影響現實世界中的聲音:所謂的「頭部相關傳遞函數」(HRTF)旨在精確模仿真實感知。如果沒有這個系統,近距離的聲音聽起來尤其不自然。
室內聲學仿真受益於早期的聲音反射和混響,這取決於房間大小、形狀和材料表面。因此,當用戶在空蕩蕩的辦公室里開始 AR 遊戲時,虛擬對手的聲音會像自己的聲音一樣在牆上迴蕩,這種聲音的均勻性旨在加強存在感。
其中包含的空間音頻渲染和室內聲學功能改進並擴展了傳統的 Oculus SpatializerSDK,而且這一功能集可在未來的版本中進行擴展。根據 Meta 的說法,該系統比流行遊戲引擎中的內置音頻系統更適合 VR 使用,後者主要針對遊戲機和 PC。
另一方面,XR Audio SDK提供了靈活性和易用性,即使沒有音頻經驗的開發人員也允許沉浸的基本混音。
對於 Unity 引擎中的新項目,Meta 建議使用新的XR Audio SDK,以便更好地長期維護應用或嘗試實驗性功能。