AI 儲存需求升溫,EonStor GSx 與 Dell Project Lightning 進軍平行檔案系統市場

隨著生成式 AI、HPC 與資料分析工作負載快速成長,儲存系統需要同時處理大量資料與高併發 I/O,平行檔案系統因此成為近年最受關注的儲存架構之一。除了既有業者持續更新產品,近年也有多家廠商推出新平台,競逐 AI 應用所帶動的高效能儲存市場。

目前的平行檔案系統大致可依產品問世時間分為三個族群。早期產品包括開源的 Lustre、PVFS/OrangeFS、BeeGFS,以及商用的 IBM GPFS/Spectrum Scale,現稱為 Storage Scale。約在 2010 年前後出現的中生代產品,則包括 GlusterFS、DDN 基於 Lustre 平台發展的 ExaScaler,以及 Quobyte、Qumulo 等商用平台。

2010 年代後期至 2020 年代初期,WEKA、VAST Data 與 Hammerspace 等新創業者以不同於傳統架構的設計切入市場,逐漸成為 AI 儲存應用的重要參與者。Hitachi 與 HPE 分別在 2021 年及 2023 年將 WEKA 與 VAST Data 平台納入自身產品線,也反映大型儲存業者對平行檔案系統需求的重視。

新產品接連進入市場

近年投入平行檔案系統的廠商持續增加。DDN 在 2023 年底推出自行開發的 Infinia 平台;華為與 Quantum 則在 2024 年初分別推出 OceanFS 平行檔案系統與 Myriad 平台。

Dell 在 2024 年 5 月的 Dell Technologies World 大會透露,正透過 Project Lightning 計畫發展 PowerScale 的平行檔案系統版本。NetApp 也在 2024 年 9 月的 InSight 大會表示,正在開發專門針對 AI 應用的 ONTAP 資料平台。

進入 2025 年後,Pure Storage 於 4 月推出 FlashBlade//EXA,台灣廠商普安則推出採用平行存取架構的 EonStor GSx 系列。Dell 隨後在 2025 年 8 月預告 Project Lightning 即將全面上市,將為 PowerScale 提供平行存取功能。本文聚焦於普安 EonStor GSx 與 Dell Project Lightning 兩項產品。

普安 EonStor GSx:聚焦中小型叢集環境

EonStor GSx 是普安推出的平行檔案儲存系統,核心為 GSx 儲存設備內建的 Infortrend Parallel File System,並搭配專屬用戶端主機代理程式,對 GSx 儲存叢集執行平行存取。以目前公開資訊來看,GSx 是台灣本土廠商推出的平行檔案系統產品。

GSx 最多支援 10 台設備組成單一叢集,硬體則提供四種節點型號,包括採用 U.2 NVMe SSD 的 GSx 5000U 與 GSx 4000U,以及採用 SAS 硬碟的 GSx 5000 與 GSx 4000。普安表示,每個 GSx 節點同時整合 metadata 伺服器、I/O 節點與儲存空間功能,顯示其架構可能採用分散式 metadata 設計。

分層資料保護與管理

在資料保護方面,GSx 分為兩個層級:第一層是各 GSx 節點本身提供 RAID 5/6;第二層則是跨叢集的遠端複製。系統可透過 EonOne 網頁式管理軟體進行部署與管理。

效能方面,普安宣稱單一 GSx 節點最高可提供每秒 43 GB 的讀取速度與每秒 16.5 GB 的寫入速度,且效能可隨節點數量增加而線性提升。以最大 10 節點的組態計算,整個 GSx 叢集可達每秒約 400 GB 的讀取傳輸率,以及每秒約 150 GB 的寫入傳輸率。

不過,GSx 目前單一叢集最多支援 10 個節點,與部分面向大型資料中心的平行檔案系統相比,規模相對有限。這項限制也可能反映普安的市場策略,即先聚焦規模較小的 AI、HPC 或企業應用環境,避開與大型國際業者在中大型部署市場的直接競爭。至於實際效能,仍會受到工作負載、網路環境、資料存取模式與節點配置影響。

Dell Project Lightning:在既有儲存平台上加入平行存取

Dell 於 2024 年 5 月首次透露 Project Lightning 計畫,目標是為 PowerScale 的非結構化資料提供平行存取能力。Dell 當時宣稱,Project Lightning 可提供接近線速的效能,網路頻寬使用率可達 97%,並能為 1,000 個 GPU 提供所需資料吞吐率;其效能則可達傳統全快閃橫向擴充 NAS 的 20 倍。

在 Dell Technologies World 2025 大會上,Dell 進一步說明 Project Lightning 的進展,並表示以每個機架單元的隨機與循序存取效能計算,其資料吞吐率可達競爭對手平行檔案系統的 2 倍。這些數據屬於 Dell 公布的比較結果,實際表現仍需視測試條件與部署環境而定。

根據 Dell 公布的簡報,Project Lightning 是建構在 PowerScale 與 ObjectScale 兩套分散式儲存平台之上的軟體層。換言之,它並非獨立於既有產品之外的儲存硬體,而是透過軟體與用戶端元件,讓這兩套平台具備平行存取能力。

面向 AI 推論與高併發 I/O

Dell 表示,Project Lightning 已向部分客戶與合作夥伴提供封閉預覽版,並計畫推出由 Project Lightning 軟體、PowerEdge XE GPU 伺服器及 PowerScale 儲存叢集組成的高效能解決方案。該方案將整合 KV 快取與 NVIDIA 推論傳輸庫 Inference Xfer Library,簡稱 NIXL,用於執行推論工作負載。

Dell 在 2025 年 8 月預告 Project Lightning 將全面上市。透過用戶端軟體層,系統可把存取操作分散至 PowerScale 叢集的所有節點,為多個用戶端提供平行存取的大量 I/O 能力,應用場景涵蓋 AI、HPC 與資料分析。

Dell 同時強調,Project Lightning 將提供一致的高速存取、高平行性與低延遲,並採用分散式 metadata,以避免集中式 metadata 形成效能瓶頸。不過,正式產品的上市時間、支援規模與實際效能,仍有待 Dell 後續公布完整規格與驗證結果。

三種平行檔案系統發展策略

從近年產品布局來看,業者大致採取三種不同策略:

  • 直接採用 OEM 平台:HPE 與 Hitachi 分別引進 VAST Data 與 WEKA 平台,以較短時間補足平行檔案系統產品線。
  • 自行開發全新平台:華為、DDN、Quantum 與普安選擇建立新的平行檔案系統平台,從架構層面切入 AI 儲存需求。
  • 延伸既有儲存產品:Dell 與 NetApp 分別以 PowerScale 與 ONTAP 為基礎,發展支援平行存取的衍生平台,降低既有客戶導入新架構的門檻。

其中,Dell Project Lightning 與 NetApp 的 ONTAP for AI,代表傳統儲存業者將既有分散式儲存平台改造成適合 AI 工作負載的平行存取架構。若 NetApp 的相關計畫正式推出,加上 Dell Project Lightning 完成上市,主要儲存業者在平行檔案系統市場的競爭將更加完整。

市場競爭焦點轉向 AI 資料管線

平行檔案系統的競爭,已不再只是單純比較儲存容量,而是延伸至 GPU 資料供應、metadata 擴充能力、網路頻寬利用率、叢集規模與低延遲存取等面向。對 AI 訓練與推論而言,儲存系統能否持續提供大量資料,將直接影響 GPU 使用效率。

EonStor GSx 以最多 10 節點的叢集規模與既有儲存設備整合為主要特色;Project Lightning 則試圖透過軟體層,為 PowerScale 與 ObjectScale 擴充平行存取能力。兩者分別代表新平台切入與既有平台延伸的兩種路線,也顯示 AI 儲存市場仍處於快速演進階段。

Related Articles

Stay Connected

0FansLike
0FollowersFollow
22,800SubscribersSubscribe
spot_img

Latest Articles