近日，美國專利商標局公布了蘋果公司的一項新專利申請，名為「基於高效圖像捕獲和聚散度以及瞳孔間距離歷史記錄進行眼動追蹤」。本發明涉及 Apple Vision Pro及未來的智能眼鏡。
蘋果專利涵蓋了通過交錯每隻眼睛的圖像捕獲來追蹤用戶眼部特徵（例如，注視方向或瞳孔位置），並使用用戶眼部捕獲之間的預測關係來預測這些眼部捕獲之間的眼睛特徵。
用戶眼睛的圖像以交錯的方式捕獲，從某種意義上說，第二隻眼睛的圖像是在第一隻眼睛的圖像捕獲時間之間捕獲的，反之亦然。
一些實施例提供了一種設備，該設備通過交錯圖像捕獲來追蹤用戶雙眼注視方向，並使用雙眼聚散歷史來預測捕獲之間的中間幀的另一隻眼睛的注視方向。
例如，為了以 N fps 速率確定雙眼的注視方向，可以以 N/2 fps 的速度捕獲每隻眼睛的交錯圖像，第一隻眼和第二隻眼睛的圖像捕獲間隔 1/N 秒，並且可以根據另一隻眼睛在每個中間幀時間的注視方向和當時預測的聚散度來預測每隻眼睛的幀。
在一個示例中，該設備包括一個或多個圖像傳感器，這些傳感器配置為交錯捕獲用戶第一隻眼睛和第二隻眼睛的圖像，其中第一隻眼睛的圖像在捕獲時以大約第一幀速率捕獲，第二隻眼睛的圖像以大約第一幀速率捕獲。第二隻眼睛的圖像是在第一隻眼睛圖像的捕獲時間之間捕獲的。
一些實施例提供了一種設備，該設備通過交錯每隻眼睛的圖像捕獲來追蹤用戶兩隻眼睛的瞳孔位置，並使用瞬時 IPD 預測另一隻眼睛的瞳孔位置。
例如，為了以 N fps 速率確定雙眼的瞳孔位置，可以以 N/2 fps 捕獲每隻眼睛的交錯圖像，並根據另一隻眼睛在每個中間幀時間的瞳孔位置和當時預測的瞬時 IPD 預測每隻眼睛的幀之間的中間瞳孔位置時間。
蘋果專利圖1 說明了用於追蹤用戶眼睛的示例設備，圖 1 示出了使用具有兩個眼部攝影機 #120a 和 #120b（每隻眼睛一個攝影機）的設備（#100）追蹤用戶的兩隻眼睛#125a 和 #125b。
該設備（例如，眼鏡設備或其他頭戴式設備）包括兩個眼部攝影機（#120a 和 #120b）、兩個照明器（#122a 和 #122b）和兩個內容查看部分（#130a 和 #130b）。這些組件可以嵌入或連接到設備 #100 的外殼或其它部分。例如，如果設備 #100 是眼鏡設備，則兩個眼部攝影機和照明器可以嵌入到眼鏡設備的框架部分（未示出）中，該框架部分圍繞或支持兩個內容查看部分。
蘋果專利圖 2 說明了捕獲眼睛圖像以進行眼動追蹤的示例時間軸。
蘋果專利圖 7 說明了單目水平注視角度的示例；圖 8 示出了水平聚散度的示例；圖 9 示出了用於確定垂直聚散度的單目垂直凝視角度示例。
蘋果專利圖 10 以上是追蹤眼睛特徵的方法的流程圖表示；圖 11 是示例性裝置的組件框圖。
