近日,美國專利商標局公布了蘋果一項專利申請,該專利申請涉及在頭顯中串流 360° 沉浸影片的優化方案。
蘋果在其專利背景中指出,一般來說,電腦系統可以生成沉浸式影片內容。例如,沉浸式影片內容包括可以根據一系列觀看方向和/或觀看位置呈現的視覺數據。沉浸式影片內容可以分區渲染和緩衝,然後有選擇地呈現給用戶,以給用戶一種感覺,即她正在根據特定的視野和/或觀看視角查看視覺數據。
在某些實現中,沉浸式影片內容可以使用可穿戴顯示設備(例如VR 或AR 頭顯)以 3D 方式呈現給用戶。此外,沉浸式影片內容的不同部分可以呈現給用戶,這取決於用戶身體和/或用戶輸入的位置和方向,從而設置視圖緩衝區,讓每一幀圖像可以更流暢的銜接。
蘋果專利圖 7 是流式傳輸沉浸式影片內容以使用多個通信鏈路向用戶演示的示例系統圖;圖 2A 是用於呈現沉浸式影片內容的示例視口圖;圖 2B 是用戶身體運動自由度的示例圖。
更具體地說,如蘋果專利圖 2A 所示,沉浸式影片內容 #200 可以包括可視數據,其可以根據一系列觀看方向和/或相對於用戶 #102 的觀看位置來呈現(在圖 2A 中表示為圍繞用戶的球體)。
可以選擇視口 #202 以向用戶呈現部分沉浸式影片內容(基於用戶頭部的位置和/或方向),給用戶一種感覺,即她正在根據特定的視野和/或觀看視角查看視覺數據。此外,視口可以根據用戶的移動不斷更新,給用戶一種他們在視覺環境中轉移視線的感覺。
圖中標註的傳感器可以檢測用戶沿這些軸中的一個或多個平移頭部和/或圍繞這些軸中的一個或多個旋轉頭部。
作為另一個示例,傳感器可以檢測用戶何時繞 x 軸旋轉頭部,有時稱為「滾動」運動。作為另一個例子,傳感器可以檢測用戶何時繞 y 軸旋轉頭部,有時稱為「俯仰」運動。
作為另一個例子,傳感器可以檢測用戶何時繞 z 軸旋轉頭部,有時稱為「偏航」運動。