Kontingente und Limits

In diesem Dokument sind die quotas aufgeführt, die für Dataplex gelten.

Ein Kontingent schränkt ein, wie viel von einer bestimmten gemeinsam genutzten Google Cloud-Ressource Ihr Google Cloud-Projekt nutzen kann, einschließlich Hardware, Software und Netzwerkkomponenten. Daher sind Kontingente Teil eines Systems, das Folgendes tut:

  • Ihre Nutzung oder Ihren Verbrauch von Google Cloud-Produkten und -Diensten überwachen.
  • Ihren Verbrauch dieser Ressourcen einschränken, um u. a. für Fairness zu sorgen und Nutzungsspitzen zu reduzieren.
  • Konfigurationen verwalten, die automatisch vorgeschriebene Einschränkungen erzwingen.
  • Möglichkeit, das Kontingent anzufordern oder zu ändern.

Wenn ein Kontingentlimit überschritten wird, blockiert das System in den meisten Fällen den Zugriff auf die entsprechende Google-Ressource und die Aufgabe, die Sie ausführen möchten, schlägt fehl. In den meisten Fällen gelten Kontingente für jedes Google Cloud-Projekt und werden von allen Anwendungen und IP-Adressen geteilt, die dieses Google Cloud-Projekt verwenden.

Auch für Dataplex-Ressourcen gelten Limits. Diese Limits stehen nicht im Zusammenhang mit dem Kontingentsystem. Limits können nur geändert werden, wenn dies angegeben ist.

Dataplex erzwingt Kontingente für die Anzahl der API-Anfragen während eines bestimmten Zeitraums und für die Anzahl der Ressourcen, die in einem Projekt erstellt werden können. Kontingente schützen Sie vor unerwarteten Auslastungsspitzen und überlasteten Diensten. Weitere Informationen dazu, warum Kontingente erzwungen werden

Je häufiger Sie Dataplex verwenden, desto höher kann Ihr Kontingentbedarf sein. Wenn ein Kontingent für Ihre Anforderungen zu niedrig ist oder Sie mit einer bevorstehenden Erhöhung der Nutzung rechnen, können Sie proaktiv eine Kontingenterhöhung anfordern.

Kontingente für Anfragen

Die Dataplex API erzwingt Kontingente für die Dataplex Catalog-Ressourcenverwaltung und für Suchanfragen auf verschiedenen Ebenen, unabhängig von ihrem Ursprung. Dazu gehören direkte API-Aufrufe, Clientbibliotheken, die Google Cloud CLI und die Google Cloud Console.

Die folgenden Kontingente gelten für Dataplex-Anfragen:

Kontingent Standard
Leseanfragen für Einträge und Aspekte pro Projekt, Region und Minute 6.000
Schreibanfragen für Einträge und Aspekte pro Projekt, Region und Minute 1.500
Leseanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt, Nutzer und Minute 100
Leseanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt und Minute 200
Schreibanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt, Nutzer und Minute 10
Schreibanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt und Minute 20
Suchanfragen pro Projekt, Nutzer und Minute 900
Suchanfragen pro Projekt und Minute 1.200
Suchanfragen pro Organisation und Minute 2400
Suchanfragen pro Organisation und Stunde 14400

Für jede Dataplex-Anfrage, die in der folgenden Tabelle aufgeführt ist, wird das Kontingent sowohl auf Projekt- als auch auf Projekt- und Nutzerebene durchgesetzt.

Kontingent Beispiele
Leseanfragen für die Ressourcenverwaltung Lake abrufen, Zonen auflisten
Schreibanfragen für die Ressourcenverwaltung Lake erstellen, Asset löschen
Anfragen für Metadaten abrufen Entität und Partition abrufen
Anfragen für Metadaten auflisten Entitäten und Partitionen auflisten
Schreibanfragen für Metadaten Entität aktualisieren, Partition löschen
Leseanfragen für Aufgaben- und Jobressourcen Aufgabe abrufen, Jobs auflisten
Schreibanfragen für Aufgaben- und Jobressourcen Aufgabe erstellen, Job abbrechen
IAM-Richtlinienanfragen festlegen IAM-Richtlinie festlegen

Kontingente für Ressourcen

Das Ressourcenkontingent wird auf Projektebene für die folgenden Ressourcentypen erzwungen: Lake, Zone, Asset, On-Demand-Aufgabe, wiederkehrende Aufgabe. Ihre aktuelle Nutzung des Dataplex-Kontingents können Sie in der Google Cloud Console auf der Seite Kontingente prüfen.

Kontingenterhöhung anfordern

  1. Öffnen Sie in der Google Cloud Console die Seite Kontingente.

    Kontingente aufrufen

    Auf der Seite wird eine Liste der Kontingente angezeigt.

  2. Wählen Sie die Kontingente aus, die Sie ändern möchten, und klicken Sie auf Kontingente bearbeiten.

  3. Geben Sie das neue Kontingent für das ausgewählte Kontingent ein.

  4. Klicken Sie auf Anfrage senden.

Verwenden Sie zur Erhöhung/Verringerung der meisten Kontingenten die Google Cloud Console. Weitere Informationen finden Sie unter Höheres Kontingentlimit anfordern.

Kontingentabhängigkeiten

Ihre Dataplex-Nutzung kann auch andere Google Cloud-Produkte umfassen. Für die Datenerkennung müssen beispielsweise Cloud Storage und/oder BigQuery APIs aufgerufen werden, um mit den zugrunde liegenden Ressourcen zu interagieren. Für diese Produkte gelten Kontingente auf Projektebene, von denen einige auch für die Nutzung von Dataplex gelten.

Kontingentseiten anderer Produkte, die Sie mit Dataplex verwenden können:

Diese Liste ist nicht vollständig.

Limits

Die folgenden Limits gelten für Dataplex Catalog und die Dataplex-Suche:

Limit Wert
Größe einer Eintragsanfrage und Aspekt 2 MB
Länge einer Eintrags-ID 4.000 Zeichen
Länge eines voll qualifizierten Namens in einem Eintrag 4.000 Zeichen
Länge des Anzeigenamens der Eintragsquelle in einem Eintrag 500 Zeichen
Länge der Beschreibung der Eintragquelle in einem Eintrag 2.000 Zeichen
Länge der Eintragsquellenressource in einem Eintrag 4.000 Zeichen
Länge des Quellsystems in einem Eintrag 64 Zeichen
Länge der Quellplattform des Eintrags in einem Eintrag 64 Zeichen
Länge der Eintragsquellenlabels in einem Eintrag 128 Zeichen für jeden Schlüssel und Wert
Größe des JSON-Inhalts in einem Aspekt 120 KB
Gesamtgröße eines Eintrags 5 MB
Maximale Anzahl von Aspekten in einem Eintrag 10.000
Länge des Anzeigenamens des Eintragstyps, Aspekttyps und der Eintragsgruppe 256
Länge der Beschreibung von Eintragstyp, Aspekttyp und Eintragsgruppe 1.024
Maximale Anzahl der erforderlichen Aspekttypen in einem Eintragstyp 20
Maximale Anzahl von Aufzählungswerten in einer Vorlage für Aspekttypen 1.024
Maximale Anzahl von Elementen in Dataplex-Suchergebnissen 500