Apple Vision Pro,不僅僅是蘋果全新的重磅品類,而且在它身上也融合了蘋果過去幾乎所有新技術,比如空間音頻就是其中一個例子。
蘋果表示,Vision Pro中空間音頻可以很好的應用在:影視節目、遊戲內容、3D空間照片、3D空間影片、影片通話、等,甚至整個系統和UI交互中也充分融合空間音頻的能力。
而蘋果如何高規格的打造Vision Pro,更是在告訴大家,空間音頻將是AR、MR設備的一大殺器,它對於提升臨場感至關重要。
1,蘋果最強空間音頻系統
Vision Pro和大多數AR、VR一樣,採用了開放式揚聲器方案,整體的設計相對中庸一些,因為整體模組體積比較大,在頭顯硬質綁帶上還是有點突出。
據悉,蘋果Vision Pro描述頁面顯示:這是蘋果有史以來最強的空間音頻系統。
在此之前,我體驗到最好的空間音頻AR、VR設備包括:HoloLens 2,它不僅臨場感十足,而且音頻定向傳播控制極其出色,在旁邊的人幾乎聽不到設備的聲音。
2,音頻射線追蹤
根據現場體驗的反饋,所有人在體驗之前都實現通過iPhone原生感相機掃描耳朵輪廓,從而為Vision Pro體驗提供更適合你個人的空間音頻效果。
該技術最早是在WWDC22上公布,其目標是AirPods Pro提供更符合你耳朵輪廓的空間音頻效果。因為AirPods耳機的設計是在保證佩戴舒適性,同時在數千人不同耳朵輪廓的基礎上建立了一個通用HRTF模型,來打造出適用性較廣的空間音頻能力。
而在Vision Pro上,則更進一步。
目前大家可以通過具備空間音頻的AirPods Pro等產品來了解空間音頻的能力。但是我要說的是,在Vision Pro中的空間音頻將會更進一步。
其中一個重要邏輯就是:它會充分融合設備中LiDAR掃描,對房間內聲學特性(物理材質等)進行分析,然後打造出適用於你耳朵輪廓且匹配你房間的「空間音頻」效果。
上面這項技術,被蘋果稱為「音頻射線追蹤」(Audio Raytracing)。當然,在部分VR遊戲中已經支持此技術,只不過對照關係都在遊戲的虛擬場景之內。
相比AirPods Pro的空間音頻,Vision Pro中既考慮你的耳朵輪廓資訊,又融合(虛擬場景的)聲音在房間內傳播特性,來達到虛實融合的目的。
3,visionOS音頻交互
在WWDC公開課中,我們也看到了蘋果visionOS的聲音交互設計指南。從中我們了解到,更多的聲音交互層面的資訊。
空間中還原聲音的目標是:
- 1,正確的音源位置;
- 2,正確的音源方向。
圍繞這兩點,再加上一些技巧基本可以很好的設計好空間音頻交互。
其中主要的要求是:
- 1,背景音舒適、音量合適、不刺耳、不聒噪;
- 2,前後景聲音分明,利用好聲音位置資訊;
- 3,需要明確左右位置,提供明確的聲音方向;
- 4,背景迴響,提升整體氣氛;
- 5,聲音和視覺交互錨定,整體具備層次感。
參考:Apple