近日，美國專利商標局公布了蘋果的兩項專利申請，涉及 Vision Pro 上的空間影片和空間照片，內容也可以在 iPhone 15 Pro 上創建。
專利一：XR 錄製器
蘋果的專利涵蓋了主題技術的實現，該技術提供了記錄XR體驗的系統和方法，允許以後從不同的視角或角度回放。
該技術涵蓋一個 XR 系統，該系統提供 XR 內容的錄製、存儲、編輯、管理和回放，以便從 XR 環境中的不同視角重新查看 XR 體驗。在一個示例中，在一段時間內捕獲有關設備所在物理環境的時間排序 3D 資訊（例如，來自一個或多個深度傳感器的深度資訊），以便用於體驗的 XR 錄製。
在基本相同的時間段內，設備可以捕獲和/或顯示影片和/或音頻內容（例如，包括空間音頻內容）。在基本相同的時間段內，電腦生成（CG）內容在環境視圖的一部分上生成和顯示。與在該時間段內顯示的 CG 內容相對應的內容也被捕獲為時間排序的 CG 內容，並與時間排序的 3D 資訊（例如，包括深度資訊）、元數據（包括場景、影片和/或音頻的相關資訊）一起按時間順序存儲。
與該時間段內顯示的 CG 內容相對應的、由 XR 系統捕獲的 CG 內容可以包括場景圖、在時間段內顯示的 CG 內容的 3D 幾何形狀、紋理、材質、動畫等，如果記錄用戶在時間段內向場景中的其他方向或位置看的話，在時間段內會顯示 CG 內容的 3D 幾何圖形、紋理、材質、動畫等，以便可以從任何角度播放 XR 錄製。
在記錄期間（例如，實時或在線）和/或記錄之後（例如，離線），還可以生成物理環境的3D重建（基於深度資訊、影片、音頻和/或其他傳感器數據），可以存儲 3D 重建，並且在某些示例中，還可以存儲時間順序重建軌跡， 與按時間順序排列的 CG 內容、按時間順序排列的 3D 資訊、元數據、影片和/或音頻及時對齊。
根據蘋果 iPhone 15 營銷材料，該系統主要是為 Apple Vision Pro 設計的，儘管 iPhone 15 Pro 將允許用戶在今年晚些時候拍攝「空間影片」。當 Vision Pro 於 2024 年推出時，這些影片將可以在 Vision Pro 上播放。
蘋果還有趣地暗示，實時 3D 影片可能能夠呈現在車輛的擋風玻璃上。
蘋果專利圖 2 示出了可以實現的示例軟體架構；圖 3 示出了根據所述技術實現的電子設備的其他功能。
蘋果專利圖 6 示出了錄製 XR 體驗的示例功能；蘋果專利圖 5 說明了錄製、高級編輯和播放XR體驗的各個階段。高級編輯說明了用戶如何將虛擬熊添加到在森林中拍攝的場景中。這種簡單的 XR編 輯將來可能會很有趣。
專利二：3D 照片
蘋果的第二項專利涵蓋設備、系統和方法，這些設備、系統和方法可根據用戶在 XR 環境中的觀看位置和 3D 照片在 XR 環境中的位置，確定如何在 XR 環境中呈現 3D 照片（例如，3D、2D、模糊或完全不呈現）。
在一些實施方案中，在具有處理器的電子設備上獲得 3D 照片，該 3D 照片是基於由圖像捕獲設備捕獲的一個或多個圖像創建的不完整 3D 表示。在一些實施方案中，確定電子設備相對於 3D 照片放置位置的觀看位置，並且基於觀看位置確定 3D 照片的呈現模式。
在某些實施方案中，根據 XR 環境中的展示模式在放置位置提供 3D 照片。
