近日，Magic Leap宣布與英偉達合作，在NVIDIA Omniverse 平台中推出沉浸式、逼真、光線追蹤數字孿生，以在工程、建築、零售和其他行業創造新的效率和價值。
Magic Leap 與英偉達合作，尋找一種新方案來實現 1：1 比例 3D 數字模型的離線計算和流式傳輸。根據 Magic Leap 的說法，此次合作允許企業用戶從 NVIDIA Omniverse 平台渲染和流式傳輸身臨其境的全尺寸數字孿生模型，而不會影響視覺質量，並包括將常見的企業建模程序集成到 UI 中的擴展。
兩家公司致力於的技術進步包括：
- 光線追蹤和深度學習超級採樣（DLSS），使內容能夠以高度詳細、逼真的質量呈現；
- Magic Leap 動態調光技術，消除顯示器上 99.7% 的環境光，使 AR 在更多種類的明亮照明條件下可用；
- 數字內容中的精確環境照明和反射；
- 基於深度重新投影功能，可消除延遲並將數字內容持久地錨定在用戶環境中。
為了幫助提高設計和 3D 建模的效率，並使創建、設計和協作的企業和專業人員能夠在 Magic Leap 2 設備上渲染準確、逼真的數字孿生，Magic Leap 創建了一個 Omniverse 擴展，將內容從最常見的企業建模工具（如 Autodesk Maya）渲染到頭顯，而無需轉換或優化。數字孿生內容以 USD 文件的形式存儲在 Omniverse Nucleus 中。在 Nucleus 中，用戶可以實時編輯和協作處理內容。
只需單擊「在 Magic Leap 上查看」，圖像就會在伺服器上渲染並流式傳輸到 Magic Leap 2，在那裡它會以正確的位置、方向和比例顯示給用戶。Omniverse XR 擴展將自動渲染高質量的立體圖像，並將其提交到行業標準的 OpenXR API。
然後，伺服器端 OpenXR 遠程渲染運行時利用 NVIDIA GPU 加速來合成和編碼立體圖像。然後，這些圖像通過網路傳輸，在那裡它們被接收、解碼並顯示在 Magic Leap 2 上。
Magic Leap 2 還不斷將頭部姿勢、眼動追蹤、控制器狀態和其他輸入數據發送回伺服器，然後通過 OpenXR 將其呈現給 Omniverse。在後端，其他用戶可以繼續實時編輯USD內容，更改會立即渲染並流式傳輸到 Magic Leap 2。
Magic Leap 指出，它將繼續與英偉達合作，並將利用其在數字孿生技術方面的進步，為企業用戶提供更大的價值。藉助更具沉浸感和可訪問性的數字孿生，團隊可以加快設計速度、深化協作並轉變設計評審和其他體驗。
Magic Leap 與 Omniverse 的集成目前處於搶先體驗階段，預計將於今年上半年正式發布。
