沉浸式內容廠商 Groove Jones 與製藥企業輝瑞達成合作,依託 Apple Vision Pro 空間計算硬體,打造一套面向腫瘤領域的混合現實交互項目,面向患者、醫護人員以及企業內部相關群體,用沉浸式敘事傳遞腫瘤科研進展與抗癌理念。
整套 MR 體驗以真實抗癌故事作為敘事起點,藉助電影化畫面與空間音頻,還原癌症患者、家屬以及科研人員的心路歷程。項目引用相關流行病學統計數據強化大眾共情,讓使用者在情感層面理解癌症帶來的現實挑戰。完成故事篇章後,用戶將進入虛擬復刻的輝瑞實驗室環境,依靠頭顯手勢交互,與虛擬儀器、數字科學家形象開展互動。

體驗的核心環節名為 ADC Builder,使用者可以親手組裝抗體偶聯藥物,依次挑選抗體、連接子、藥效載荷三大核心組件,直觀學習靶向抗癌藥物的工作原理。
組裝完成後,場景切換至模擬人體血液環境,用戶手勢釋放自製藥劑,實時觀察藥物定向識別、清除癌細胞的全過程,配套追蹤工具同步記錄交互進度,把晦澀的生物醫藥原理轉化為可視化的直觀演示。
為實現高質量的沉浸效果,Groove Jones 動用多項自研技術。生成式 AI 工作流用來生成高清立體影像,既還原真實故事又保護當事人隱私;由數十台 iPhone 15 Pro 組成的掃描陣列生成照片級寫實科研人員虛擬形象;同時藉助 RealityKit 實體系統管控場景內大量交互物件,搭配定製化 3D 空間音頻,整套內容針對 visionOS 深度調優,保障高幀率、低延遲的運行表現。
據雙方介紹,本次 MR 項目只是輝瑞探索混合現實技術的起點。未來這套空間計算方案還有望拓展到醫學培訓、人才招募、科研輔助等多元場景,藉助新型交互手段,把腫瘤創新科研成果以更通俗易懂的形式傳遞給更多受眾。






