斯坦福大學與普林斯頓大學聯合團隊及合作者成功研發出 AI 應用 LabOS,該應用被定義為業內首個 AI-XR 協作科學家,相關成果已通過論文發布。其核心優勢在於集成多模型 AI 智能體、智能眼鏡及人機協作界面,可精準捕捉科學家視覺資訊、理解實驗情境並提供實時輔助,團隊已在癌症免疫學、生物機制研究、幹細胞工程三大生物醫學領域驗證了其性能。

作為 XR 協作類科研工具,LabOS 依託主流 XR 硬體的界面渲染、手勢識別等基礎功能,實現靈活的數據傳輸與推理 —— 眼鏡數據流可對接本地 GPU 伺服器或雲端,經 5-10 秒影片片段分析後,以結構化 JSON 輸出回傳設備,最終轉化為實時視聽反饋提供給科研人員。
測試對比顯示,AR/XR 眼鏡的適配效果優於 VR/XR 頭顯。該設備憑藉開放式視野、85 克以內的輕量化設計、超 2 小時續航,以及 6 自由度與手勢識別的三維交互能力,成為最優載體。科研人員佩戴後,可獲取分步實驗指令、錯誤修正提示等情境化指導,其適配無菌流程的手勢及語音交互功能,進一步貼合實驗室實際需求。


 
             
             
                            




