
Google の最高パフォーマンスの POSIX 準拠並列ファイル システムを使用して、HPC と AI のトレーニングとサービス提供を加速します。
機能
大規模なディープ ラーニング モデルをトレーニングするには、膨大なデータセットが必要です。DDN EXAScaler をベースとした Managed Lustre は、データアクセスを分散し、トレーニング時間を短縮して、より迅速な分析情報、より高い精度、複雑な AI プロジェクトの処理を可能にします。スケーラビリティにより、データの増加に伴うパフォーマンスの低下を防ぎ、ストレージのボトルネックを回避できます。
エージェント AI は引き続き大規模なコンテキスト ウィンドウを活用しており、エンドユーザーが LLM とやり取りする際に応答性の高いエクスペリエンスを提供するうえで、ストレージの課題が生じる可能性があります。コンテキスト ウィンドウが大きいと、アクセラレータのローカルメモリが枯渇しやすくなり、モデルが外部ストレージにアクセスする必要があるため、レイテンシの影響を受けやすくなります。1 ミリ秒未満の応答時間を実現する Managed Lustre は、TCO を最大 35% 削減し、推論スループット全体を向上させます。
データと処理タスクを効率的に分散して、リソース使用率を最適化します。GPU / TPU の使用率、チェックポイントの読み書きを改善することで、ストレージ費用とコンピューティング費用が削減され、全体的な費用対効果が向上します。
仕組み
オンプレミスで HPC インフラストラクチャをセットアップして運用することは、費用がかかり、継続的なメンテナンスが必要になります。また通常、オンプレミスのインフラストラクチャは、需要の変化に合わせて迅速にスケーリングできません。オンプレミスのハードウェアの計画、調達、デプロイ、デコミッションには、かなり時間がかかるため、HPC リソースの追加に遅れが生じることや、過剰な容量につながります。クラウドでは、最新のテクノロジーを使用する HPC インフラストラクチャを効率的にプロビジョニングし、容量をオンデマンドでスケーリングできます。科学者、研究者、アナリストは、必要に応じて、プロジェクト向けの追加の HPC 容量をすぐに利用できます。
一般的な使用例
料金
| Managed Lustre の料金 | Managed Lustre の料金は、主にロケーションとサービスレベルに基づいて決まります。 |
|---|---|
| サービスレベル | 料金 |
1 TiB あたり 1,000 MB/秒 スループットが重要な AI / ML トレーニングなどの高パフォーマンス ワークロードに最適です。 | 1 GiB あたり月額 $0.60 から |
1 TiB あたり 500 MB/秒 高パフォーマンスのバランスに最適: 大量のスループットを必要とする要求の厳しい AI/ML ワークロード、複雑な HPC アプリケーション、データ集約型の分析に最適です。価格とパフォーマンスのバランスが取れているため、費用対効果を高めることができます。 | 1 GiB あたり月額 $0.34 から |
1 TiB あたり 250 MB/秒 汎用 HPC とスループット重視の AI に最適: 幅広い HPC ワークロード、AI/ML 推論、データの前処理、従来の NFS よりも大幅に優れたパフォーマンスを必要とするアプリケーションに適しており、費用対効果の高い価格設定となっています。 | 1 GiB あたり月額 $0.21 から |
1 TiB あたり 125 MB/秒 並列アクセスが必要な容量重視のワークロードに最適: 大容量と並列ファイル システム アクセスが重要なシナリオ向けに設計されています。I/O バウンドの並列タスクが少ない場合に適しています。 | 1 GiB あたり月額 $0.145 から |
Google Cloud の料金の詳細すべての料金の詳細を見る。
Managed Lustre の料金
Managed Lustre の料金は、主にロケーションとサービスレベルに基づいて決まります。
1 TiB あたり 1,000 MB/秒
スループットが重要な AI / ML トレーニングなどの高パフォーマンス ワークロードに最適です。
1 GiB あたり月額 $0.60 から
1 TiB あたり 500 MB/秒
高パフォーマンスのバランスに最適: 大量のスループットを必要とする要求の厳しい AI/ML ワークロード、複雑な HPC アプリケーション、データ集約型の分析に最適です。価格とパフォーマンスのバランスが取れているため、費用対効果を高めることができます。
1 GiB あたり月額 $0.34 から
1 TiB あたり 250 MB/秒
汎用 HPC とスループット重視の AI に最適: 幅広い HPC ワークロード、AI/ML 推論、データの前処理、従来の NFS よりも大幅に優れたパフォーマンスを必要とするアプリケーションに適しており、費用対効果の高い価格設定となっています。
1 GiB あたり月額 $0.21 から
1 TiB あたり 125 MB/秒
並列アクセスが必要な容量重視のワークロードに最適: 大容量と並列ファイル システム アクセスが重要なシナリオ向けに設計されています。I/O バウンドの並列タスクが少ない場合に適しています。
1 GiB あたり月額 $0.145 から
Google Cloud の料金の詳細すべての料金の詳細を見る。
ビジネスケース
Managed Lustre のお客様事例
Resemble AI が高性能ワークロードの実行に Managed Lustre を選んだ理由
Resemble AI、CEO、Zohaib Ahmed 氏
「企業がディープフェイクの音声、動画、画像を特定してブロックできるかどうかは、モデルの性能にかかっています。Managed Lustre は、動的なデータセットを使用したモデルのトレーニングを成功させるうえで不可欠です。GPU の性能を完全に引き出せているため、当社が評価した他のストレージ ソリューションよりも 6 倍高速です。」