美國密西根大學科研團隊近日開發出一款名為 HandProxy 的創新系統,用戶只需通過語音指令,即可在虛擬現實(VR)與增強現實(AR)環境中操控一隻虛擬手,實現「動口不動手」的交互體驗。

該系統不僅能執行抓取物體、調整窗口等基礎操作,更能理解如「清理桌面」之類的複合指令,無需逐步引導,智能化程度顯著高於當前普遍僅支持基礎操作的 VR 語音功能。
研究團隊指出儘管手機等設備早已普及語音助手,但VR/AR領域在結合手部交互的語音控制方面仍近乎空白。HandProxy的推出使用戶能在語音、手勢與控制器之間自由切換,特別適用於空間受限、雙手被占用,或有運動障礙的使用場景,讓VR體驗更具包容性與舒適度。
該技術可直接接入大多數現有VR程序,對開發者極為友好,目前研究團隊正致力於解決系統偶爾誤讀指令的問題,未來計劃為其加入問答確認功能,以進一步提升交互精準度。






