Meta Reality Labs 的研究人員早前展示了一種通過 AR 與現實世界交互的方法。其中，通過利用微軟 HoloLens 可以營造一種「虛擬動作影響物理場景的視覺錯覺」。
據悉，Reality Labs 和杜伊斯堡-埃森大學的研究人員設計了一種將真實對象虛擬化的方法，以便可以與它們進行實時交互。這一研究不僅能將現實世界中的真實對象數字化，而且還能在生成虛擬對象後無縫擦除與之對應的真實對象。
具體來說，團隊提出了 Scene Responsiveness 場景響應的概念和系統，即虛擬動作影響物理場景的視覺錯覺。使用協同對齊的數字孿生來保持環境中物理對象的一致性，Scene Responsiveness 允許用戶操縱看似虛擬對象的物理對象。
Reality Labs 研究人員將這一概念稱為「場景響應性」，並於去年年底在 ACM 用戶界面軟體和技術研討會上發表了他們的研究成果。但從影片來看，這一研究目前展示的內容在視覺上並不完美，很大程度上是一種概念驗證，依賴於大量手動的、特定場景的工作才能實現。
是什麼讓這個概念如此有趣呢？我們都看過 AR 演示體驗，虛擬對象似乎漂浮在你的房間裡，附著在你的牆上，甚至躲在物體的「後面」。我們甚至看到虛擬對象似乎能夠遵循房間的物理規律，在桌上滾動，然後在到達桌子邊緣時正確地掉落。
但是，將空間中的真實物體數字化，讓用戶對它們進行虛擬控制，同時將真實物體從原來的位置抹去，這是一個非常有趣的技巧。也許更強大的是當場景中的虛擬人物與現實世界中的物體直接交互。
當然，研究中展示的演示內容尚不完美，很大程度上是一個概念證明，依賴於大量特定場景。但是隨著電腦視覺和人工智慧的快速發展，我們不難想像這樣一個系統如何能夠以一種自動的、獨立於場景的方式建立起來，並且非常令人信服。
