以降のセクションでは、Dataproc Metastore の割り当てと上限について説明します。割り当てを変更するには、Google Cloud Console から追加の割り当てをリクエストしてください。具体的に注記がある場合を除き、通常、上限を引き上げることはできません。
割り当てと上限
Dataproc Metastore サービス
項目 | 割り当てと上限 | メモ |
---|---|---|
単一リージョンあたりのサービス数 | 20 サービス | プロジェクトが Google Cloud サービス ポリシーに違反すると、リージョンごとのサービス割り当ては大幅に削減されます。 |
マルチリージョンあたりのサービス数 | 5 サービス | プロジェクトが Google Cloud サービス ポリシーに違反すると、リージョンごとのサービス割り当ては大幅に削減されます。 |
Dataproc Metastore サービスのメタデータ ストレージ
項目 | 割り当てと上限 | 注 |
---|---|---|
Developer 階層サービス単位のメタデータ ストレージ |
10 GB | |
Enterprise 階層サービス単位のメタデータ ストレージ |
1 TB |
Dataproc Metastore プロジェクトの秒間クエリ数
項目 | 割り当てと上限 | 注 |
---|---|---|
プロジェクトごとの秒間クエリ数(QPS) | 20 QPS | |
プロジェクトごとユーザーごとの秒間クエリ数(QPS) | 5 QPS | |
プロジェクトごとの秒間メンテナンス クエリ数(QPS) | 20 QPS | 次の Hive メタストア リクエストでは、この割り当てが消費されます。 createTable createDatabase deleteTable deleteDatabase |
Dataproc Metastore のジョブ タイムアウト上限
項目 | 割り当てと上限 | メモ |
---|---|---|
エクスポート、バックアップ、復元のジョブ タイムアウト上限 | 1 時間 | |
インポートのジョブ タイムアウト上限 | 3 時間 |
割り当ての管理
Dataproc Metastore では、さまざまな理由により、使用できるリソースの割り当てに上限が設けられています。たとえば、割り当て量を制限して予期しない使用量の急増を防ぐことで Google Cloud ユーザーのコミュニティを保護しています。割り当ては、無料枠で Google Cloud を試しているユーザーをトライアルに留めておくことにも役立ちます。
すべてのプロジェクトは同じ割り当てで開始されますが、これは追加の割り当てをリクエストすることで変更できます。一部の割り当て量は、プロダクトの使用状況に応じて自動的に増える場合があります。
権限
Identity and Access Management(IAM)のプリンシパルが割り当ての表示や、割り当ての増加のリクエストをするには、以下のいずれかのロールが必要です。
タスク | 必要なロール |
---|---|
プロジェクトの割り当て量をチェックする | プロジェクトのオーナーまたは編集者、または割り当て閲覧者 |
割り当て量の変更、割り当て量の追加のリクエストを行う | プロジェクト
オーナーまたは編集者、
割り当て管理者、
または serviceusage.quotas.update 権限を持つカスタムロール
|
割り当て量を確認する
Console
Google Cloud コンソールで、[割り当て] ページに移動します。
更新する割り当てを検索するには、[表をフィルタリング] を使用します。割り当ての名前がわからない場合は、このページにあるリンクを使用します。
割り当てを超えたときのエラー
gcloud
コマンドで割り当てを超えた場合は、gcloud
により quota exceeded
のエラー メッセージが出力され、終了コード 1
が返されます。
API リクエストで割り当てを超えた場合は、Google Cloud により次の HTTP ステータス コード HTTP 413 Request Entity Too Large
が返されます。
追加の割り当てをリクエスト
Google Cloud コンソールの [割り当て] ページから追加の割り当てをリクエストします。 割り当てのリクエストが処理されるまでに、24~48 時間かかります。
Console
Google Cloud コンソールで、[割り当て] ページに移動します。
[割り当て] ページで、変更する割り当てを選択します。
ページの上部にある [
割り当てを編集] をクリックします。名前、メールアドレス、電話番号を入力して、[次へ] をクリックします。
割り当てリクエストを入力して、[完了] をクリックします。
リクエストを送信します。
リソースの可用性
各割り当て量は、リソースを使用できるという前提で、作成可能な特定のリソースタイプの最大数を表します。割り当て量によって、リソースの可用性が保証されるわけではない点に注意することが重要です。割り当て量が使用可能でも、新しいリソースを使用できなければ、そのリソースを作成することはできません。
たとえば、us-central1
リージョンで新しいリージョンの外部 IP アドレスを作成するための割り当て量が十分にあっても、そのリージョンに使用可能な外部 IP アドレスがない場合、外部 IP アドレスの作成はできません。ゾーンリソースの可用性は、新しいリソースを作成できるかにも影響を及ぼす可能性があります。
リージョン全体でリソースを使用できない状況はまれですが、ゾーン内のリソースが使い果たされることはあります。通常、そのリソースタイプのサービスレベル契約(SLA)に影響はありません。詳細については、リソースに関連する SLA をご覧ください。
次のステップ
- Dataproc Metastore リソースについて詳細を確認する