Apache Spark 向けの Google Cloud サーバーレス

業界屈指の費用対効果を実感してください。Apache Spark 用 Google Cloud Serverless は、プレビュー版の次世代ネイティブ クエリ エンジンである Lightning Engine を搭載しています。高度なベクトル化された実行、組み込みのインテリジェント キャッシング、最適化されたストレージ I/O により、オープンソースの Apache Spark より 4.3 倍以上高速化**を実現し、Spark のクエリとデータ処理のパフォーマンスが大幅に向上するため、分析情報をより迅速に取得し、費用を削減できます。

** クエリは TPC-DS 標準と TPC-H 標準から派生したものであり、TPC-DS 標準と TPC-H 標準の仕様のすべての要件に準拠していないため、公開されている TPC-DS 標準と TPC-H 標準の結果と比較することはできません。

本番環境の Spark ワークロードを自信をもって実行できます。Apache Spark 用 Google Cloud Serverless は、リソースを最適化し、ジョブの分離を提供し、Google Cloud のエンタープライズ セキュリティ機能（VPC-SC、CMEK、個人認証、カスタム組織ポリシーなど）をサポートします。セキュアなサブネット、保存データと転送データの暗号化のデフォルト設定、VM またはルートへの直接アクセスの禁止などの機能により、安全な実行環境を実現し、運用上のセキュリティ負担を最小限に抑えます。自動化のために構築されていますが、エキスパート ユーザーは Spark 構成に完全なアクセスを維持してきめ細かい制御を行うことができます。

生成 AI を Spark 開発ライフサイクルに組み込みます。データのインテリジェントなコンテキストを備えたノートブックで Gemini によるコンテキスト対応の PySpark コード生成を活用して、生産性を大幅に向上させます。Gemini Cloud Assist Investigate で AI を活用したトラブルシューティングの推奨事項を入手して、問題を迅速に解決し、より深い運用分析情報を取得し、パフォーマンスを最適化します。

分散トレーニングまたはバッチ推論ワークロードをシームレスに実行します。Apache Spark 用 Google Cloud Serverlessは、GPU アクセラレーションの組み込みサポートを提供し、XGBoost、PyTorch、Transformers などの一般的な ML ライブラリが事前パッケージ化されています。これにより、AI/ML 環境の起動時間が大幅に短縮され、画像が Google 認定されているため信頼性が向上します。