Meta 日前在 Connect 2024 大會上宣布將於明年通過一項新 API,全面解鎖 Quest 系列頭顯的直通透傳攝像頭功能,為開發者社區帶來創作自由與可能。
Meta 表示:「隨著這項技術的落地,開發者們將能夠以前所未有的方式探索 MR 的無限潛力——從構建精準的對象追蹤系統到部署智能 AI 應用,從設計驚艷的視覺效果疊加到實現深度的場景理解,一切都將變得觸手可及。」

當前,儘管市場上諸如 Meta Quest 3 與 Apple Vision Pro 等頂尖混合現實頭顯已能通過攝像頭讓用戶同時感知虛擬與現實世界,但第三方開發者在訪問攝像頭原始數據方面卻面臨著重重限制。他們雖能利用攝像頭透視作為背景,卻難以觸及更深層次的數據寶藏,如精細的手部與身體骨骼追蹤、環境3D網格的家具邊界框識別,以及受限的對象跟蹤功能。這些限制如同枷鎖,嚴重製約了頭顯在增強現實應用中的創新能力。
相比之下,蘋果通過 visionOS 2 為 Vision Pro 的直通透傳攝像頭提供了有限制的原始訪問權限,但這一權限僅限於非公開的內部應用,並且要求獲得蘋果的特別許可,使用場景也被限定在「商業環境」之中。
Meta 尚未表示是否會對 Passthrough API 有任何限制,這可能會為 Quest 頭顯解鎖全新的用例。