
Managed Lustre 是 Google 的平行處理檔案系統,具備最高效能且符合 POSIX 標準,可加快 HPC、AI 訓練和服務提供速度。
功能
想訓練大型深度學習模型,就需要大量資料集。Managed Lustre 以 DDN EXAScaler 為基礎,會將資料分散至多個存取位置,進而縮短訓練時間,並提高深入分析速度和準確率,可用來處理複雜的 AI 專案。Managed Lustre 具備優異的擴充能力,可隨著資料量增加提升效能,避免出現儲存空間瓶頸。
代理式 AI 持續推動大型脈絡窗口,這可能會帶來儲存空間方面的挑戰,因為需要在使用者與 LLM 互動時,快速回應。脈絡窗口越大,就越易受延遲影響,因為加速器上的本機記憶體通常會耗盡,導致模型必須存取外部儲存空間。Managed Lustre 可提供低於 1 毫秒的回應時間,將 TCO 降低多達 35%,並提升整體推論處理量。
以高效率分散資料及處理工作,充分運用資源,提高 GPU/TPU 使用率、檢查點讀寫效率,進而降低儲存和運算費用,並提高整體成本效益。
常見用途
定價
| Managed Lustre 定價 | Managed Lustre 的定價主要取決於位置和服務等級。 |
|---|---|
| 服務水準 | 定價 |
1,000 MB/秒/TiB 最適合重視處理量的高效能工作負載,例如訓練 AI/機器學習。 | 每月每 GiB $0.60 美元起 |
500 MB/秒/TiB 最佳高效能平衡:非常適合要求嚴苛的 AI/機器學習工作負載、複雜的高效能運算應用程式,以及需要大量處理量,但可從更平衡的性價比中獲益的資料密集型數據分析。 | 每月每 GiB $0.34 美元起 |
250 MB/秒/TiB 最適合一般用途 HPC 和處理量密集型 AI:適用於各種 HPC 工作負載、AI/機器學習推論、資料前處理,以及需要比傳統 NFS 更優異效能的應用程式,而且價格實惠。 | 每月每 GiB $0.21 美元起 |
125 MB/秒/TiB 最適合著重容量且需要平行存取的工作負載:專為需要大容量和平行檔案系統存取的情境設計。適合 I/O 負載較低的平行工作。 | 每月每 GiB $0.145 美元起 |
進一步瞭解 Google Cloud 定價。查看所有定價詳細資料。
Managed Lustre 定價
Managed Lustre 的定價主要取決於位置和服務等級。
1,000 MB/秒/TiB
最適合重視處理量的高效能工作負載,例如訓練 AI/機器學習。
每月每 GiB $0.60 美元起
500 MB/秒/TiB
最佳高效能平衡:非常適合要求嚴苛的 AI/機器學習工作負載、複雜的高效能運算應用程式,以及需要大量處理量,但可從更平衡的性價比中獲益的資料密集型數據分析。
每月每 GiB $0.34 美元起
250 MB/秒/TiB
最適合一般用途 HPC 和處理量密集型 AI:適用於各種 HPC 工作負載、AI/機器學習推論、資料前處理,以及需要比傳統 NFS 更優異效能的應用程式,而且價格實惠。
每月每 GiB $0.21 美元起
125 MB/秒/TiB
最適合著重容量且需要平行存取的工作負載:專為需要大容量和平行檔案系統存取的情境設計。適合 I/O 負載較低的平行工作。
每月每 GiB $0.145 美元起
進一步瞭解 Google Cloud 定價。查看所有定價詳細資料。
企業案例
Managed Lustre 客戶經驗分享
Resemble AI 為何選擇使用 Managed Lustre 執行高效能工作負載
Resemble AI 執行長 Zohaib Ahmed
「我們協助企業辨識及封鎖深偽音訊、影片和圖片的能力,取決於模型的品質。在我們使用動態資料集,成功訓練模型方面,Managed Lustre 至關重要。這項產品能充分發揮 GPU 的效能,速度比我們評估的其他儲存空間解決方案快 6 倍。」