Meta Codec Avatar 研究負責人 Yaser Sheikh 在 NVIDIA GTC 大會上介紹了化身技術。
去年 9 月，Meta 在 Lex Fridman 播客中展示了其 Codec Avatars 技術。在其中，科技博主 Lex Fridman 和馬克·祖克柏就 Codec Avatars 進行了長達一個小時的交談。在談話中，他們戴著 Meta Quest Pro，該頭顯使用五個傳感器進行眼睛和面部追蹤。
在演講中，Yaser Sheikh 表示每個工作站都配備了 4 個 GeForce RTX 4090 顯卡，用於渲染雙方的化身。因此，這意味著該技術距離在像 Meta Quest 3 這樣的獨立頭顯上以這種質量運行化身還有很長的路要走，Quest 3 只能提供一小部分渲染處理。
根據 Sheikh 的說法，播客中使用了 Codec Avatars 2.0。Sheikh 後來在問答環節中表示，實驗室已經讓 Codec Avatars 1.0 適用於 VR 一體機，這些化身可以通過智慧型手機面部掃描來創建。
Sheikh 還展示了新一代技術 Codec Avatars 3.0，該技術使用高斯飛濺技術，使人物渲染得更加逼真，甚至包括一根頭髮絲。
Meta 多年來一直在研究 Codec Avatars，並於 2019 年首次對這項研究進行了深入研究，長期目標是在經濟實惠的頭顯上實現逼真的遠程呈現。
與此同時，Meta 打造逼真化身的壓力越來越大：Apple Vision Pro 已經通過 Personas 提供了功能良好的遠程呈現解決方案。雖然數字角色僅在窗口內以二維方式顯示，但我們可以期待蘋果在未來幾個月和幾年內大大改進這項技術。
根據泄露的硬體路線圖，Meta Codec Avatars 可能會應用於新的高端頭顯，這可能是 Meta 正在與 LG 合作開發的頭顯，據報道將於 2025 年發布。
