近日，大連工業大學教授單鵬帶領研究生團隊研發了一款 AI 多模態 AR 穿戴式沉浸互動體驗系統。
用戶只需佩戴上一副 AR 眼鏡，並連接一個便攜的終端設備，即可瞬間進入一個充滿奇幻與知識的元宇宙空間。例如，在「星幻紅山」主題中，紅山 C 形玉龍仿佛就在眼前，伴隨著專業的講解聲，用戶可以 360 度全方位地觀賞其精美細節。只需低頭，用戶就能「親臨」C 形玉龍的考古現場，感受歷史的厚重與神秘。
除了「星幻紅山」，該系統還提供了多個引人入勝的主題模塊。在「航空之光」模塊中，用戶只需握拳再張開手掌，就能在掌心看到飛機模型的精彩展示，每次握拳都能帶來不同的驚喜。而「引擎畫卷」模塊則允許用戶通過手指的凌空觸碰，輕鬆拆解飛機引擎發動機，了解其內部構造。至於「宇宙加特林」模塊，更是將娛樂性與科技感完美結合，用戶只需以手臂為「槍」，手掌一收一放，就能在空中綻放出絢麗的「加特林」煙花。
據介紹，這款 AI 多模態 AR 穿戴式沉浸互動體驗系統融合了電腦視覺、語音識別、大空間識別、檢索增強生成（RAG）等前沿技術，能夠精準捕捉用戶的手勢、語音和空間資訊，並實時生成個性化的互動體驗。
據悉，該系統已經吸引了多家企業的關注，並成功簽署了框架協議。未來，這些企業可以藉助先進的 AI 算法與元宇宙構建技術，創建出逼真且交互性強的虛擬工作空間和產品展示平台。對於工業製造企業而言，這意味著他們可以構建自己的元宇宙產品中心，讓用戶在虛擬環境中與 AI 智能導師互動，完成複雜機械產品的裝配培訓，從而提高展示效率和體驗效果。
