このドキュメントでは、Dataplex に適用される割り当ての一覧を示します。
Google Cloud では、割り当てを使用して公平性を確保し、リソースの使用量と可用性の急増を抑えます。割り当ては、Google Cloud プロジェクトで使用できる Google Cloud リソースの量を制限します。割り当ては、ハードウェア、ソフトウェア、ネットワーク コンポーネントなど、さまざまなリソースタイプに適用されます。たとえば、割り当てによって、サービスへの API 呼び出しの数、プロジェクトで同時に使用されるロードバランサの数、作成可能なプロジェクトの数を制限できます。割り当てを適用することで、サービスの過負荷を防ぎ、Google Cloud ユーザーのコミュニティを保護します。割り当ては、自組織で使用している Google Cloud リソースの管理にも役立ちます。
Cloud Quotas システムは次のことを行います。
- Google Cloud のプロダクトとサービスの消費量をモニタリングする
- これらのリソースの消費量を制限する
- 割り当て値の変更をリクエストする方法を提供する
ほとんどの場合、割り当ての許容量を超えるリソースを消費しようとすると、システムによってリソースへのアクセスがブロックされ、実行しようとしているタスクは失敗します。
割り当ては通常、Google Cloud プロジェクト レベルで適用されます。あるプロジェクトでリソースを使用しても、別のプロジェクトで使用可能な割り当てに影響することはありません。Google Cloud プロジェクト内では、すべてのアプリケーションと IP アドレスで割り当てが共有されます。
Dataplex リソースにはシステムの上限もあります。システムの上限は変更できません。
Dataplex では、特定の期間中に API リクエストの数と、プロジェクトで作成できるリソースの数に割り当てが適用されます。割り当てによって、予期しない使用量の急増とサービスの過負荷を防ぎます。詳しくは、割り当てが適用される理由をご覧ください。
Dataplex をより多く使用するにつれて、割り当てのニーズが増える場合があります。割り当てがニーズを満たすには少なすぎる、または使用量の今後の増加が想定される場合は、事前に割り当ての増加をリクエストできます。
リクエストの割り当て
Dataplex API は、送信元に関係なく、Dataplex Catalog リソース管理リクエストと検索リクエストにさまざまなレベルで割り当てを適用します。これには、API 呼び出し、クライアント ライブラリ、Google Cloud CLI、Google Cloud コンソールから直接発信されたリクエストが含まれます。
Dataplex リクエストには、次の割り当てが適用されます。
割り当て | デフォルト |
---|---|
エントリとアスペクトの読み取りリクエスト数(プロジェクト、リージョン、1 分あたり) | 6000 |
エントリとアスペクトの書き込みリクエスト数(1 リージョン、1 プロジェクト、1 分あたり) | 1500 |
アスペクト タイプ、エントリタイプ、エントリ グループの読み取りリクエスト数(プロジェクト、ユーザー、1 分あたり) | 100 |
プロジェクトあたりの 1 分あたりのアスペクト タイプ、エントリタイプ、エントリ グループの読み取りリクエスト数 | 200 |
アスペクト タイプ、エントリタイプ、エントリ グループの書き込みリクエスト数(プロジェクト、ユーザー、1 分あたり) | 10 |
プロジェクトあたり 1 分あたりのアスペクト タイプ、エントリタイプ、エントリ グループの書き込みリクエスト | 20 |
1 プロジェクト、1 ユーザー、1 分あたりの検索リクエスト数 | 900 |
プロジェクトあたりの検索リクエスト数(1 分あたり) | 1200 |
1 分あたりの組織あたりの検索リクエスト数 | 2400 |
1 組織あたりの 1 日あたりの検索リクエスト数 | 345600 |
プロジェクトあたりのリージョンあたりの読み取りリクエスト数(1 分あたり) | 400 |
1 プロジェクト、1 ユーザー、1 リージョン、1 分あたりのメタデータ ジョブの読み取りリクエスト数 | 200 |
プロジェクトあたりのリージョンあたりの 1 分あたりのメタデータ ジョブの書き込みリクエスト数 | 20 |
1 プロジェクト、1 ユーザー、1 リージョン、1 分あたりのメタデータ ジョブの書き込みリクエスト数 | 10 |
次の表に示す Dataplex リクエストごとに、プロジェクトごととプロジェクトごとのユーザーごとの両方のレベルで割り当てが適用されます。
割り当て | 例 |
---|---|
リソース管理の読み取りリクエスト | レイクを取得してゾーンを一覧表示する |
リソース管理の書き込みリクエスト | レイクを作成してアセットを削除する |
メタデータのリクエストを取得する | エンティティを取得する、パーティションを取得する |
メタデータのリクエストの一覧表示 | エンティティの一覧表示、パーティションの一覧表示 |
メタデータの書き込みリクエスト | エンティティを更新する、パーティションを削除する |
タスクとジョブのリソースの読み取りリクエスト | タスクを取得してジョブを一覧表示する |
タスクとジョブのリソースの書き込みリクエスト | タスクを作成し、ジョブをキャンセルする |
IAM ポリシー リクエストの設定 | IAM ポリシーを設定する |
リソースの割り当て
リソースの割り当ては、レイク、ゾーン、アセット、オンデマンド タスク、繰り返しタスクのリソースタイプに対して、プロジェクトごとのレベルで適用されます。Dataplex 割り当ての現在の使用状況は、Google Cloud コンソールの [割り当て] ページで確認できます。
割り当ての増加をリクエストします
Google Cloud コンソールで、[割り当て] ページに移動します。
変更する割り当てを選択します。
> [割り当てを編集] をクリックします。
[その他の操作]新しい割り当て値とリクエストの説明を入力します。
[次へ] をクリックします。
連絡先の詳細を入力します。
[リクエストを送信] をクリックします。
通常、割り当てを調整するには、Google Cloud コンソールを使用します。詳細については、割り当ての調整をリクエストするをご覧ください。
割り当ての依存関係
Dataplex の使用には、他の Google Cloud プロダクトが関与する場合があります。たとえば、データ検出では、Cloud Storage API や BigQuery API を呼び出して、基盤となるリソースを操作する必要があります。これらのプロダクトにはプロジェクト レベルの割り当てがあり、これには Dataplex の使用に適用される割り当てが含まれます。
Dataplex で使用する場合があるその他のプロダクトの Quota ページ:
このリストはすべてを網羅したものではありません。
上限
Dataplex Catalog と検索には、次の上限が適用されます。
上限 | 値 |
---|---|
エントリとアスペクト(スキーマ アスペクトを含む)のリクエストのサイズ | 2 MB |
エントリ ID の長さ | 4,000 文字 |
エントリ内の完全修飾名の長さ | 4,000 文字 |
エントリ内のエントリソースの表示名の長さ | 500 文字 |
エントリ内のエントリソースの説明の長さ | 2,000 文字 |
エントリ内のエントリソース リソースの長さ | 4,000 文字 |
エントリ内のエントリソース システムの長さ | 64 文字 |
エントリ内のエントリソース プラットフォームの長さ | 64 文字 |
エントリ内のエントリソース ラベルの長さ | キーと値ごとに 128 文字 |
アスペクト内の JSON コンテンツのサイズ(スキーマ アスペクトを除く) | 120 KB |
エントリの合計サイズ | 5 MB |
エントリ内のアスペクトの最大数 | 10,000 |
エントリタイプ、アスペクト タイプ、エントリ グループの表示名の長さ | 256 |
エントリタイプ、アスペクト タイプ、エントリ グループの説明の長さ | 1024 |
アスペクト タイプのテンプレートのフィールド名の長さ | 63 |
エントリタイプの必須アスペクト タイプの最大数 | 20 |
アスペクト タイプのテンプレートの列挙値の最大数 | 1024 |
Dataplex 検索結果の最大アイテム数 | 500 |