本文档介绍 Data Catalog 的配额和限制。
配额限制了您的 Google Cloud 项目可以使用的特定共享 Google Cloud 资源的数量,包括硬件、软件和网络组件。配额属于执行以下操作的系统:
- 监控 Google Cloud 产品和服务的使用情况或消费情况。
- 为了确保公平性和减少使用量高峰等原因,您可以限制对这些资源的消耗。
- 维护可自动强制执行规定限制的配置。
- 提供更改配额或请求更改配额的方法。
在大多数情况下,当超出配额时,系统会立即阻止对相关 Google 资源的访问,并且您尝试执行的任务会失败。在大多数情况下,配额适用于每个 Google Cloud 项目,由使用该 Google Cloud 项目的所有应用和 IP 地址共享。
如需增加或减少部分配额,请使用 Google Cloud 控制台。如需了解详情,请参阅申请更高配额。
资源也存在限制。这些限制与配额系统无关。除非另有说明,否则无法更改限制。
默认情况下,配额和限制按项目应用。
配额
为了计算组织的 QPM(每分钟查询次数),Data Catalog 会将组织中项目的 QPM 相加。
Data Catalog 使用 QPM 配额来防止服务过载,而不是控制项目之间的请求工作负载分配。因此,项目和组织具有相同的默认 QPM 配额。换句话说,如果组织有多个项目,并且其中一个项目的请求工作负载接近默认组织(和同一项目)的配额,则此项目可能会影响其他项目的潜在工作负载。
如需分别调整组织和项目配额,请参阅申请更高配额。
QPM 配额 | 默认值 |
---|---|
读取 | 6000 |
Write | 1500 |
搜索 | 1200 |
数据沿袭配额
Data Lineage API 对以下各项实施配额限制:
- 仅返回数据的读取请求
- 用于创建或更改数据的写入请求
- 创建 Open Lineage
Data Lineage API 对每个项目、每个用户和每个区域强制执行数据沿袭配额。默认配额如下:
QPM 配额 | 默认值 |
---|---|
读取 | 1000 |
Write | 6000 |
打开 Lineage | 3000 |
例如,在超出配额之前,每分钟最多可以在 us
区域的 test-project
项目中提交 1000 个 GetProcess
请求。
其他配额
限制
Data Catalog API 对条目、标记和业务元数据施加限制。
进入限制
限制 | 值 |
---|---|
所有位置中每个组织的条目组数量上限 | 1 万 |
所有位置中每个组织的条目数上限 (如果超出限制,搜索结果延迟时间可能会增加) |
1 亿 |
每个条目组的条目数上限 | 10 万 |
每个条目的 MB 数 | 10 MB |
每个页面的最大搜索结果数 | 1000 |
代码限制
限制 | 值 |
---|---|
每个标记模板的字段数 | 500 |
标记模板中字段名称的长度 | 512 个字节 |
标记模板中资源名称长度 | 512 个字节 |
标记模板中字符串字段的长度 | 10000 字节 |
标记模板中的最大枚举值数 | 100 |
每个条目的标记数 | 1000 |
两个数字的最大总和:
|
15000 |
每个分类的最大政策标记数 | 100 |
每个项目的最大分类数 | 40 |
政策标记树的最大深度 (每个分类 100 个政策标记仍适用) |
5 |
政策标记名称的长度 | 200 个字节 |
每个用户的加星标条目数量 | 200 |
业务元数据限制
限制 | 值 |
---|---|
每个数据条目的数据管理员数量上限 | 15 |
概览中富文本的大小上限(不包括图片大小) | 100 KB |
富文本(包括图片)的总大小 | 10 MB |