近日，Meta 宣布與寶馬合作開展的車載 MR 研究取得新進展。
據悉，該聯合研究項目於 2021 年宣布，旨在探索有朝一日將 AR 和 VR 集成到智能車輛中，以用於車載娛樂和駕駛員輔助。這項技術可能會徹底改變汽車、火車、飛機等的旅行，解鎖新的免提通信、娛樂和實用形式。
VR 頭顯配備了許多傳感器，但移動的車輛帶來了一個棘手的挑戰，因為像 Oculus Insight 這樣的跟蹤技術同時使用慣性運動傳感器（IMU）和攝影機來精確估計頭顯的位置和運動。
在非慣性參考系中，這兩種模式是衝突的，因為攝影機觀察相對於汽車內部的運動，而 IMU 測量相對於世界的加速度和旋轉速度。這種不匹配意味著像Meta Quest 2這樣的 VR 頭顯目前在車輛內轉彎和/或加速時無法顯示穩定的虛擬內容。
如今，Meta 將寶馬汽車傳感器陣列的 IMU 數據實時整合到「Project Aria」研究頭顯的追蹤系統中。這些附加資訊允許系統計算頭顯相對於汽車的位置。不過，由於 Aria 眼鏡沒有任何形式的顯示，因此研究人員將解決方案移植到 Quest Pro 以測試將虛擬物體實際錨定到汽車內部。
Meta 認為這是車載 MR 功能的新突破。其表示，在新方案下即使汽車急轉彎、快速加速或越過顛簸路段，虛擬內容也能保持穩定。
未來，Meta 希望繼續與寶馬合作，進一步利用現代汽車不斷增長的機器感知能力，以實現未來的用例，繼續開展關於 6DoF 定位系統及地標識別等新功能的研究，例如識別地標和其他興趣點。Meta預計這種能力對於未來的 AR 眼鏡和個性化 AI 助手將是無價的。
