配额和限制

本文档介绍 Cloud Data Fusion API 的当前内容限制和请求配额。

请求配额

下列 Cloud Data Fusion API 用量配额适用于 Cloud Data Fusion 控制平面 API 请求,例如创建、更新或删除 Cloud Data Fusion 实例的请求。它们不适用于让其他 Google Cloud 资源(如 Compute Engine 或 Cloud Storage 资源)在 Cloud Data Fusion 实例上运行数据处理流水线的请求(针对流水线资源的请求可能需要受到其他配额限制的约束)。

配额可能随时更改。

请求配额
一个区域内的单个用户每分钟可以发出的请求数 600

这些限制适用于每个 Google Cloud Console 项目,由使用该项目的所有应用和 IP 地址分享。

其他 Google Cloud 配额

您的 Cloud Data Fusion 实例可以使用其他 Google Cloud 产品运行流水线。这些产品具有项目级层配额,其中包括适用于 Cloud Data Fusion 用量的配额。

Dataproc

Cloud Data Fusion 以 Dataproc 作为流水线的执行环境。Dataproc 配额适用于您执行的所有流水线。

Cloud Logging

Cloud Data Fusion 在 Logging 中保存日志。Logging 配额适用于您的 Cloud Data Fusion 实例。

其他配额

根据您的流水线使用的 Google Cloud 服务,可能还适用其他配额,例如:

  • BigQuery - 在从 BigQuery 读取数据或向其写入数据时,需要考虑 BigQuery 配额
  • Bigtable - 在从 Bigtable 读取数据或向其写入数据时,需要考虑 Bigtable 配额
  • Cloud Storage - 在从 Cloud Storage 读取数据或向其写入数据时,需要考虑 Cloud Storage 配额
  • Compute Engine - 在从 Compute Engine 读取数据或向其写入数据时,需要考虑 Compute Engine 配额
  • Spanner - 在从 Spanner 读取数据或向其写入数据时,需要考虑 Spanner 配额