为 Apache Spark 和 SQL 提供原生 BigQuery 支持。了解详情。

Spark on Google Cloud

业内首个自动扩缩的无服务器 Spark，与出色的 Google 原生和开源工具集成。根据需要跨所有使用场景（包括 ETL、数据科学和数据探索）开发和运行 Spark。

试用无服务器 Spark 与我们联系

部署 Google 推荐的分析湖仓一体解决方案

立即开始使用

优势

提高开发者的工作效率并更快地获取数据洞见

通过无服务器 Spark 简化运维

编写可自动扩缩的 Spark 应用和流水线，无需对基础设施进行任何手动预配或调整。

适合所有数据用户的无缝 Spark

Spark 与 BigQuery、Vertex AI 和 Dataplex 集成，因此无需自定义集成，只需点击两下即可从这些界面编写和运行用于 ETL、数据探索、分析和机器学习的 Spark 作业。

灵活的使用方式

并没有一种通用的选项。您可以为 Spark 应用选择无服务器、Kubernetes 集群和计算集群。

主要特性

只需点击两下，即可从所选界面运行可自动扩缩的 Spark 作业

采用无服务器 Spark 助力数据科学

Google Cloud 的无服务器 Spark 通过自动化基础架构，加速数据科学流程。专注于编码，而非集群管理。自动扩缩以及与 BigQuery 和 Vertex AI 的无缝集成，简化工作流，从而加快迭代和模型开发速度。查看适用于无服务器 Spark 的最新库，以便支持更多应用场景，并减少所需的用户配置。查看面向数据科学家的最新代码示例，包括如何使用 Apache Spark、XGBoost 和 Hugging Face Transformers 库构建用于预测客户流失的流水线。

通过 Vertex AI 运行 Spark

一键式将 Spark 用于数据科学：数据科学家可以从 Vertex AI Workbench 无缝使用 Spark 进行开发，还内置了安全防护功能。Spark 与 Vertex AI 的 MLOps 功能集成，用户可以通过与 Vertex AI Pipelines 集成的笔记本执行程序执行 Spark 代码。