宅中地 - 每日更新
宅中地 - 每日更新

贊助商廣告

X

英特爾:企業數據中心設計因生成式AI帶來新變革,這些是發展關鍵

2023年11月08日 首頁 » 熱門科技

英特爾:企業數據中心設計因生成式AI帶來新變革,這些是發展關鍵


隨著生成式AI迅速崛起,企業開始思考未來數據中心設計,來應對生成式AI應用發展,甚至一些科技巨頭已經開始打造AI數據中心。例如臉書Meta正在打造下一代AI數據中心,該數據中心將具有液冷式人工智慧硬體,以及高性能人工智慧網路,將數千個MTIA人工智慧晶片連接在一起,以創建起數據中心規模的人工智慧訓練集群,支持未來10年生成式人AI應用研究。

英特爾數據中心平台工程與架構業務群總經理Zane Ball在近日的英特爾創新日會後一場媒體活動上表示,生成式AI的興起,對於數據中心帶來了重要變革之一,將加速企業數據中心對於液體冷卻(liquid cooling)技術的採用。

Zane Ball表示,執行生成式AI應用對於系統能耗負擔很大,因此需要新的硬體散熱機制。他認為,越來越多的企業將在新數據中心中導入液體冷卻技術,來協助伺服器系統的散熱,不僅是為了節省能源,還為了支持更高能耗的加速算子件所需。他認為這有助於加速企業數據中心採用液體冷卻技術。

但他直言,要實現實用且易於部署的液體冷卻技術,需要產業間的合作,「雖然這需要時間,但這件事讓人感到興奮,也代表新機會。」他說。

不只是冷卻散熱機制的改變,未來伺服器硬體設計需要有新的變革。為了提升伺服器所能處理的推論模型參數,Zane Ball指出,未來將持續改進Xeon處理器在AI運算性能方面。他表示,過去英特爾已經取得了顯著的進步,例如與第三代Xeon處理器相比,第四代Xeon處理器的AI處理性能提升多達14倍。因此未來將持續發展能夠支持更大參數的模型、更高內存帶寬的伺服器系統,「這正是我們未來CPU發展的方向。」

英特爾將在12月14日推出代號為Emerald Rapids的第5代Xeon伺服器處理器,也是針對企業數據中心AI應用需求所設計,採用和前一代相同節點,但核心數達到64核,而且具備更快的內存傳輸速度。

英特爾:企業數據中心設計因生成式AI帶來新變革,這些是發展關鍵


從英特爾對於數據中心AI系統的分類,也能夠反映出不同形態伺服器,能夠支持處理的推論模型參數的規模。

若以單一CPU插槽的Emerald Rapids伺服器來舉例,Zane Ball也表示,這種伺服器適合處理100億參數的模型推論任務,他強調,雖然執行更多參數的模型是有可能,但考慮到系統的性能, 100億個參數會是較為合理的數量。

宅中地 - Facebook 分享 宅中地 - Twitter 分享 宅中地 - Whatsapp 分享 宅中地 - Line 分享
相關內容
Copyright ©2025 | 服務條款 | DMCA | 聯絡我們
宅中地 - 每日更新