宅中地 - 每日更新
宅中地 - 每日更新

贊助商廣告

X

蘋果開源端側AI落地Vision Pro:2D圖秒變可交互3D場景

2026年01月13日 首頁 » 熱門科技

自visionOS 26系統起,蘋果原生照片應用已內置一鍵生成"空間場景"功能,能在近乎瞬間將任意圖像轉換為可小幅移動視角觀看的立體照片。而過去一年湧現的多款開源與商用AI系統更進一步,能將照片轉化為可自由探索甚至行走其中的場景,例如Marble可通過頭顯瀏覽器在WebXR中實現該功能。

蘋果開源端側AI落地VisionPro2D圖秒變可交互3D場景

但Marble作為計算密集型伺服器模型需數分鐘生成結果,這更凸顯蘋果SHARP模型的獨特價值。該模型支持消費級設備運行,兼容通用CPU及英偉達CUDA、蘋果芯Metal硬體加速,多數硬體上完成處理僅需不到1秒。蘋果罕見地將其免費開源,代碼已在GitHub發布,用戶可輕鬆在Mac等設備上運行。

與近年多數3D重建技術突破類似,SHARP採用高斯潑濺技術,通過在三維空間部署數百萬半透明色斑(高斯粒子)實現任意視角實時逼真渲染,最終生成可在標準3DGS查看器中打開的.ply文件。

針對Apple Vision Pro用戶,葡萄牙開發者Rob Matwiejczyk已推出集成SHARP模型的visionOS應用Splat Studio,提供圖形化界面且無需連接Mac或PC。該應用可在App Store免費獲取,完全在設備端運行:從照片庫選擇任意圖像即可實時生成懸浮3D場景,支持手勢旋轉、移動與縮放操作。

在M5晶片版Vision Pro上使用2014年Steam開發者大會VR會議室圖像進行測試時,Splat Studio耗時約20秒生成場景(visionOS 26照片應用的空間場景功能近乎即時生成,但二者應用層開銷差異尚不明確)。對比顯示:蘋果照片應用的空間場景允許有限視角窺探,而Splat Studio的SHARP模型支持場景自由移動觀察,但代價是伴隨視角遠離原圖位置會出現細節損失與AI幻化細節——這也是多數生成式AI技術的典型權衡。

宅中地 - Facebook 分享 宅中地 - Twitter 分享 宅中地 - Whatsapp 分享 宅中地 - Line 分享
相關內容
Copyright ©2026 | 服務條款 | DMCA | 聯絡我們
宅中地 - 每日更新