隨著XR市場的不斷發展,驍龍XR平台已成為擴展現實領域的重要力量。近日,高通公司發布第二代驍龍XR2平台和第一代驍龍AR1平台,旨在賦能XR的各個領域,推動空間計算的「變革」。
從硬體到軟體,從技術到生態,驍龍XR的成熟體現在整個產業的發展和完善上,以及交互體驗的豐富和便捷上。
高通技術公司副總裁兼XR業務總經理司宏國介紹,無論是面向VR/MR設備還是AR設備,驍龍面向消費和企業市場全面賦能,打造真正沉浸式的體驗。目前,VR和MR行業勢頭強勁,遊戲、健身、娛樂等消費級應用正在不斷發展,此外在企業市場也出現了培訓、教育、醫療等應用。在AR領域,面向消費者的沉浸式體驗剛剛起步,但已經有大量的企業正在使用豐富的AR應用,以及通過AR智能眼鏡賦能的生產力工具。
關於兩款最新平台的發布,司宏國表示,第二代驍龍XR2平台為賦能更加出色的VR和MR體驗而打造,第一代驍龍AR1平台專門為下一代智能眼鏡而打造。
單晶片「更絲滑」,第二代驍龍XR2升級無縫交互體驗
司宏國強調,第二代驍龍XR2平台的亮點在於突破性沉浸體驗、流暢交互,以及重構現實。其一大優勢在於,能夠在單晶片架構中完成所有的處理任務,降低時延並提升效率。
在突破性沉浸體驗方面,第二代驍龍XR2對整體架構進行了大幅度優化,以賦能頂級的一體機頭顯設備,無需外接電池組。與前代相比實現了2.5倍的性能提升,能夠賦能更佳的圖形效果和色彩細節,開發者可以充分利用新平台的GPU能力,提升應用和遊戲的視覺保真度,或是在同樣的視覺效果下節省50%的功耗。從視覺和顯示來看,第二代驍龍XR2優化支持3K×3K顯示,這對目前的VR和MR設備而言是更理想的方案。
在流暢交互方面,第二代驍龍XR2支持絕佳的並發感知技術,以更加沉浸的交互體驗使虛擬世界和物理世界更好融合。要真正實現數字和物理空間的融合,需要對用戶所在的環境有精準的理解,也需要對用戶有充分的理解,進而來進行頭部追蹤、眼球追蹤、手勢追蹤,以及對全身的動作追蹤等。這些技術在運行過程中需要消耗大量算力,為此第二代驍龍XR2的終端側AI能力相比前代提升高達8倍。
對於實現無縫交互,另一項重要技術在於連接。第二代驍龍XR2支持Wi-Fi 7和Wi-Fi 6E連接,以及面向XR的高通FastConnect軟體套件,能夠實現25%的功耗降低,峰值速度達到5.8Gbps,並且時延降低80%。
司宏國談到,高通公司在AI領域進行了大量的投入,這些投入對XR業務至關重要。第二代驍龍XR2支持INT8,並優化了不同AI模塊之間的連接,以實現緊密的協同處理,同時擴展了終端側的內存。除了高通AI引擎能力的大幅提升之外,該平台對電腦視覺模塊也進行了大幅升級。VR和MR頭顯上始終開啟的六自由度(6DoF)頭部追蹤會產生巨大的算力消耗,針對6DoF中的特徵探測和追蹤功能,第一代驍龍XR2是通過軟體來實現的,而第二代驍龍XR2通過將這一功能放在晶片硬體視覺分析引擎中,從而實現了性能提升,並降低了功耗和時延。
在重構現實方面,第二代驍龍XR2通過提升影片透視能力,對整個影片透視線程進行全面優化,可以實現低至12ms的影片透視時延。同時,還通過幾何校正、降噪、動態亮度調整等技術,提升影片透視的圖像質量。就在今天同時發布的最新Meta Quest 3,也率先搭載了第二代驍龍XR2平台。
眼鏡側AI玩出彩,第一代驍龍AR1煥新塑造虛擬助手
司宏國稱,此前推進沉浸式AR智能眼鏡的發展已有一段時間,並且實現了長足的進展,本次推出了面向沉更為時尚輕薄的智能眼鏡的專用平台,支持6DoF、分布式處理等特徵。第一代驍龍AR1,是高通為賦能下一代智能眼鏡打造的首個專用平台,其關鍵特性在於拍攝能力、AI能力、可拓展平台、虛擬助手等方面。
在拍攝能力方面,第一代驍龍AR1採用14-bit雙ISP,支持頂級即時拍攝體驗,同時還結合了智慧型手機上的諸多頂級特性,比如自動曝光、自動人臉檢測、計算HDR和人像模式。第一代驍龍AR1賦能的智能眼鏡將變革拍攝照片和影片的方式,人們可以解放雙手進行拍攝。
在AI能力方面,第一代驍龍AR1平台以更佳的聆聽體驗,以及語音指令、視覺搜索和健康數據等功能,彰顯了智能眼鏡側出色的AI能力。其中,面向健康和運動的健康傳感器,讓智能眼鏡可以為用戶帶來AR體驗,提供實用的情境資訊和指令;使用語音指令來與智能眼鏡交互可以解放雙手,這一功能在滑板、騎行、烹飪等場景非常實用。
在虛擬助手方面,智能眼鏡中的虛擬助手可以回應用戶的指令,並在用戶眼前提供情境資訊。此外第一代驍龍AR1還能夠支持更多的用例,比如能夠在街上或者購物中心通過視覺搜索為用戶提供更為豐富的資訊、進行實時翻譯、貨物揀選以及導航等。
在交互分享和快速連接方面,第一代驍龍AR1配備了更先進的連接解決方案,即基於面向XR的高通FastConnect軟體套件,能夠實現實時影片直播以及音樂串流。
司宏國介紹,第一代驍龍AR1是一款可擴展平台,旨在通過支持多種不同配置,為OEM廠商提供靈活性。其中包括,具備出色攝影機和音樂功能、以圖像拍攝為核心的智能眼鏡;支持單目顯示、完美支持提醒通知和導航應用的智能眼鏡;以及支持雙目顯示、具備更豐富視覺效果的更強大的智能眼鏡。據悉,Ray-Ban Meta智能眼鏡系列將首發第一代驍龍AR1平台。
結語
高通深耕XR領域已超過十年。在過去的幾年中,陸續推出了多款XR專用平台,包括第一代驍龍AR2、第一代驍龍XR2 、第一代驍龍XR2和第一代驍龍XR1平台。據悉,基於上述平台,高通的合作夥伴已經發布了超過80款設備,驍龍支持的技術為成熟企業、初創企業等提供了支持。
驍龍XR平台的日益成熟,為其提升市場認可度奠定了基礎,也為其可持續發展提供了保障。第二代驍龍XR2平台和第一代驍龍AR1平台的發布,將為驍龍XR帶來更多的用戶和開發者,也將催生新的場景應用和內容共創,同時將吸引更多企業和機構關注和投入XR領域,推動XR技術的研究和探索。驍龍XR平台面臨廣闊的市場空間,勢將攜手行業力量共同加速空間計算的疊代。