宅中地 - 每日更新
宅中地 - 每日更新

贊助商廣告

X

IBM著手擴展Ceph,欲充當AI底層數據存儲

2024年02月18日 首頁 » 熱門科技

IBM正著手擴展Ceph的塊和文件存儲功能,希望將其定位為Storage Scale並行文件系統之下面向AI工作負載的後端數據存儲。

Ceph是一款開源橫向擴展存儲軟體,在底層對象存儲之上提供文件、塊和對象存儲接口,擁有自修復與自託管等特性。IBM於2019年以340億美元收購紅帽時,順帶將Ceph納入囊中。就在一年多之前,IBM決定將Ceph產品從紅帽業務部門轉移至存儲部門,並將其更名為Storage Ceph。IBM Storage Ceph技術產品經理Gerald Sternagl剛剛在上個月的博文中公布了關於Ceph的後續開發計劃,如今IBM存儲業務總經理Denis Kennelly又通過簡報進一步透露了更多資訊。

IBM著手擴展Ceph,欲充當AI底層數據存儲
Denis Kennelly

作為IBM存儲業務(包括硬體與軟體產品)負責人,Kennelly表示IBM存儲收入中約有三分之二來自硬體,三分之一由軟體貢獻。Kennelly表示,IBM將在2023年擴大了其硬體存儲市場份額,特別是高端DS8000陣列和FlashSystem全閃存陣列。那麼Ceph銷量有沒有相應增長?他的回答很簡單,「有,當然有。」

IBM Storage目前關注三大重點領域:混合雲、AI以及數據恢復/彈性。Ceph在混合雲和AI領域均發揮著重要作用,有助於在將非結構化數據引入大語言模型處理系統之前,提供對這些非結構化數據的訪問。

IBM的Storage Defender產品與Cohesity長期保持合作關係,得益於對Cohesity-Veritas的收購,藍色巨人在數據恢復與彈性領域的市場地位也有所增強。從原則上講,這筆交易將幫助IBM在原本的Veritas客戶群體中打開銷路。在Kennelly看來,「備份市場顯然正迎來一波兼併浪潮。」

回到Ceph,Kennelly認為Ceph充分滿足了軟體定義存儲市場的需求。他表示,「紅帽將Ceph、OpenShift與容器技術緊密結合在一起。我們希望通過在商用硬體上運行的完整軟體定義存儲技術棧來加速這一過程,並考慮採用來自戴爾、HPE、聯想、Supermicro等廠商的伺服器/存儲硬體。」

在過去一年裡,IBM通過添加對NVMe/TCP的支持擴展了Ceph的塊存儲功能,同時提高了產品可用性。Kennelly解釋稱,對於存儲容量需求往往高達100 TB的AI項目,傳統SAN方案往往顯得捉襟見肘,相應擴展規劃可能需要20到30個獨立步驟。

他補充道,「在Ceph環境下,用戶可以直接將100 TB容量放入單一設備,將其添加至集群當中,而後即可直接使用。」Ceph能夠順利兼容一切。「WatsonX團隊也在與Ceph密切合作」,這裡的WatsonX是IBM打造的生成式AI平台。

IBM有沒有考慮過為Ceph添加GPUDirect支持能力?Kennelly坦言「我們正在考慮這方面需求」,而且IBM Storage已經提供出色的軟體,即帶有並行文件系統的Storage Scale,能夠通過GPUDirect將數據快速傳輸至GPU伺服器。

Kennelly還提到,「Storage Scale支持GPUDirect,我們可以將Scale與運行在底層的Ceph匹配起來。」

Scale還提供AFM(主動文件管理)可擴展、高性能文件系統緩存層,能夠鏈接至Ceph後端。AFM使用戶能夠創建從本地Scale集群到獨立存儲/遠程集群間的關聯,並定義文件數據位置/流以實現數據自動化管理。用戶能夠跨全球各地的站點建立起擁有單一命名空間的數據存儲視圖。

IBM一直在進行Storage Scale基準測試,Kennelly也對測試結果表示滿意,強調預計將在今年晚些時候公布結果。Scale-Ceph的基本思路,就是將數據存放在原本的位置,再由IBM對內容進行查詢。這與Snowflake和Databricks等廠商「將數據交給我們,再由我們進行查詢」的方法有所不同。

Kennelly補充道,「隨著市場對於快速查詢的需求日益提升,Storage Scale的優勢也得到進一步凸顯。用戶當然可以直接選擇NFS,但卻永遠得不到能夠與Scale比肩的性能表現。」

在他看來,「AI即將迎來重大變革,面對這個激動人心的時刻,我們還有很多工作要做。」

而Ceph將在其中發揮強大的基礎平台作用。通過作為底層數據存儲方案的Storage,Ceph將把自己管理之下的數據交付給運行在GPU伺服器當中的大語言模型。

宅中地 - Facebook 分享 宅中地 - Twitter 分享 宅中地 - Whatsapp 分享 宅中地 - Line 分享
相關內容
Copyright ©2025 | 服務條款 | DMCA | 聯絡我們
宅中地 - 每日更新