IBM Spectrum LSF、Google Cloud 上での HPC ワークロードのサポートを開始

Google Cloud Japan Team
※この投稿は米国時間 2021 年 6 月 25 日に、Google Cloud blog に投稿されたものの抄訳です。
ハイ パフォーマンス コンピューティング(HPC)は今日、金融サービス、ライフサイエンス、高等教育、研究、製造、エネルギーなど多くの業界で広く利用されています。クラウドに HPC ワークロードをデプロイしてその弾力性、スケーラビリティ、可用性を活かす企業がますます増えています。そのワークロードでは、TB~PB 単位のストレージ容量を利用し、数千から数百万もの vCPU とネットワーク リソースの作成、処理、破棄が行われます。こうした性質を考えると、ジョブ スケジューラは HPC アプリケーションにとって不可欠です。ジョブ スケジューリング ツールを利用することでオペレーションの効率を改善し、数時間から数週間かかる場合のある特定の HPC ジョブが正常に完了する確実性を高めます。
IBM Spectrum LSF は電子設計自動化(EDA)ワークロードを管理するために製造業や半導体産業で広く利用されています。ワークロードをオンプレミスとクラウドで動的に実行することは、クラウド バースト機能とも呼ばれ、データセンター内での容量とプロビジョニング時間の制約に対処し、仮想化された無限のリソースを利用するための一般的な方法になってきています。
しかし、クラウド バースト機能の課題はオンプレミス環境とクラウド環境のオペレーション上の整合性を統合し、維持することです。IBM Spectrum LSF は Google Cloud と組み合わせることでこの問題に事前に対処できます。
このたび、IBM とのコラボレーションにより、IBM Spectrum LSF が機能強化されて Google Cloud にデプロイされたリソースをオンプレミスのジョブ スケジューリング スクリプトと統合できるようになったことを発表いたします。これによりお客様はスケーラビリティと安全性に優れた Google Cloud の Compute Engine、ネットワーキング、ストレージ インフラストラクチャを存分に活用できるようになりました。
LSF-Google Cloud リソース コネクタ パッチは、ローカル SSD、GCE インスタンス テンプレート、プリエンプティブル VM などの Google Cloud の主な差別化要因をサポートしています。
Bulk API のサポート - VM インスタンスの大規模なフリートを数秒でデプロイ。
インスタンス テンプレート - 再利用可能なテンプレートを作成し、VM 構成を簡素化。
すべてのマシンタイプに対応 - カスタム マシンタイプを含む GCE の VM ファミリーとマシンタイプのすべてをサポート。
GPU - インスタンスごとに最大 16 個の GPU を接続。最大の A2 インスタンスには NVIDIA A100 GPU を最大 16 個搭載可能です。
プリエンプティブル VM - プリエンプティブル VM を Compute Engine の余剰のキャパシティを利用してプロビジョニング。GCE リソースのコストを抑える効果的な方法です。
ローカル SSD - インスタンスごとに最大 9 TB の NVMe SSD を接続。
ハイパースレッディング - GCE の「コアあたりのスレッド数」オプションをサポート。VM ごとにハイパーバイザ レベルのハイパースレッド構成が可能です(インスタンス テンプレートをサポートしている場合)。
イメージ - アタッチされている Persistent Disk すべてに対し、Windows をフルサポートするなど、カスタム ディスク イメージをサポート。
プレースメント ポリシー - 低レイテンシ パフォーマンスの向上のため、インスタンス間の相互関係を考慮し、ゾーン内でインスタンスを物理的に配置する場所を制御。
ラベル - ファイアウォール ルールの管理や課金の把握などに利用できる GCE ラベルをサポート。
最小 CPU プラットフォーム - 仮想マシン用の最小 CPU プラットフォームを指定する機能をサポート。


Google Cloud - IBM Spectrum LSF リソース コネクタ アーキテクチャ
スタートガイド
今回の IBM LSF リソース コネクタの改良は、Google との調整のもと、IBM によって行われました。新しくサポートされた機能とオペレーションについて詳しくは、公式の IBM Spectrum LSF リソース コネクタ ドキュメントをご覧ください。IBM Spectrum Computing コミュニティで付加的なドキュメントの確認とソフトウェアのダウンロードもできます。ご不明な点がある場合は、IBM または Google Cloud セールスまでお問い合わせください。
Annie Ma-Weaver、Mark Mims、Wyatt Gorman の協力に感謝します。
-ストレージ担当シニア プロダクト マネージャー Sean Derrington
-Google カスタマー エンジニア Veda Shridharan