Kontingente und Limits

In diesem Dokument sind die Kontingente aufgeführt, die für Dataplex gelten.

Ein Kontingent schränkt ein, wie viel von einer bestimmten gemeinsam genutzten Google Cloud-Ressource Ihr Google Cloud-Projekt nutzen kann, einschließlich Hardware, Software und Netzwerkkomponenten. Daher sind Kontingente Teil eines Systems, das Folgendes tut:

  • Ihre Nutzung oder Ihren Verbrauch von Google Cloud-Produkten und -Diensten überwachen.
  • Ihren Verbrauch dieser Ressourcen einschränken, um u. a. für Fairness zu sorgen und Nutzungsspitzen zu reduzieren.
  • Konfigurationen verwalten, die automatisch vorgeschriebene Einschränkungen erzwingen.
  • Möglichkeit, das Kontingent anzufordern oder zu ändern.

Wenn ein Kontingentlimit überschritten wird, blockiert das System in den meisten Fällen den Zugriff auf die entsprechende Google-Ressource und die Aufgabe, die Sie ausführen möchten, schlägt fehl. In den meisten Fällen gelten Kontingente für jedes Google Cloud-Projekt und werden von allen Anwendungen und IP-Adressen geteilt, die dieses Google Cloud-Projekt verwenden.

Auch für Dataplex-Ressourcen gelten Limits. Diese Limits stehen nicht im Zusammenhang mit dem Kontingentsystem. Limits können nur geändert werden, wenn dies angegeben ist.

Dataplex erzwingt Kontingente für die Anzahl der API-Anfragen während einer bestimmten Zeitraum und die Anzahl der Ressourcen, die in einem Projekt arbeiten. Kontingente schützen Sie vor unerwarteten Auslastungsspitzen und Überlastung . Weitere Informationen dazu, warum Kontingente erzwungen werden

Je häufiger Sie Dataplex verwenden, desto höher kann Ihr Kontingentbedarf sein. Wenn ein Kontingent zu niedrig ist, um Ihre Anforderungen zu erfüllen, oder Sie mit einem bevorstehenden steigen, können Sie proaktiv eine Kontingenterhöhung anfordern.

Kontingente für Anfragen

Die Dataplex API erzwingt Kontingente für die Dataplex Catalog-Ressource und Suchanfragen auf unterschiedlichen Ebenen, unabhängig von Ursprung. Dies gilt auch für Anfragen direkt aus API-Aufrufen, Clientbibliotheken, Google Cloud CLI und Google Cloud Console.

Die folgenden Kontingente gelten für Dataplex-Anfragen:

Kontingent Standard
Leseanfragen für Einträge und Aspekte pro Projekt, Region und Minute 6000
Schreibanfragen für Einträge und Aspekte pro Projekt, Region und Minute 1500
Leseanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt, Nutzer und Minute 100
Leseanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt und Minute 200
Schreibanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt, Nutzer und Minute 10
Schreibanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt und Minute 20
Suchanfragen pro Projekt, Nutzer und Minute 900
Suchanfragen pro Projekt und Minute 1.200
Suchanfragen pro Organisation und Minute 2400
Suchanfragen pro Organisation und Stunde 14400

Für jede Dataplex-Anfrage, die in der folgenden Tabelle aufgeführt ist, Das Kontingent wird sowohl auf Projekt- als auch auf Projekt- und Nutzerebene durchgesetzt.

Kontingent Beispiele
Leseanfragen für die Ressourcenverwaltung Lake abrufen, Zonen auflisten
Schreibanfragen für die Ressourcenverwaltung Lake erstellen, Asset löschen
Anfragen für Metadaten abrufen Entität und Partition abrufen
Anfragen für Metadaten auflisten Entitäten und Partitionen auflisten
Schreibanfragen für Metadaten Entität aktualisieren, Partition löschen
Leseanfragen für Aufgaben- und Jobressourcen Aufgabe abrufen, Jobs auflisten
Schreibanfragen für Aufgaben- und Jobressourcen Aufgabe erstellen, Job abbrechen
IAM-Richtlinienanfragen festlegen IAM-Richtlinie festlegen

Kontingente für Ressourcen

Das Ressourcenkontingent wird auf Projektebene erzwungen für die folgenden Ressourcentypen: Lake, Zone, Asset, On-Demand-Aufgabe, wiederkehrende Aufgabe. Sie können Ihre aktuelle Nutzung des Dataplex-Kontingents auf der Seite Kontingente in der Google Cloud Console.

Kontingenterhöhung anfordern

  1. Öffnen Sie in der Google Cloud Console die Seite Kontingente.

    Kontingente aufrufen

    Auf der Seite wird eine Liste der Kontingente angezeigt.

  2. Wählen Sie die Kontingente aus, die Sie ändern möchten, und klicken Sie auf Kontingente bearbeiten.

  3. Geben Sie das neue Kontingent für das ausgewählte Kontingent ein.

  4. Klicken Sie auf Anfrage senden.

Verwenden Sie zur Erhöhung/Verringerung der meisten Kontingenten die Google Cloud Console. Weitere Informationen finden Sie unter Höheres Kontingentlimit anfordern.

Kontingentabhängigkeiten

Ihre Dataplex-Nutzung kann auch andere Google Cloud-Produkte umfassen. Die Datenerkennung erfordert beispielsweise das Aufrufen von Cloud Storage und/oder BigQuery APIs für die Interaktion mit den zugrunde liegenden Ressourcen Diese Produkte haben Kontingente auf Projektebene, einschließlich der Kontingente für Dataplex-Verwendung.

Kontingentseiten anderer Produkte, die Sie mit Dataplex verwenden können:

Diese Liste ist nicht vollständig.

Limits

Die folgenden Limits gelten für Dataplex Catalog und die Dataplex-Suche:

Limit Wert
Größe einer Eintragsanfrage und Aspekt 2 MB
Länge einer Eintrags-ID 4.000 Zeichen
Länge eines voll qualifizierten Namens in einem Eintrag 4.000 Zeichen
Länge des Anzeigenamens der Eintragsquelle in einem Eintrag 500 Zeichen
Länge der Beschreibung der Eintragquelle in einem Eintrag 2.000 Zeichen
Länge der Eintragsquellenressource in einem Eintrag 4.000 Zeichen
Länge des Quellsystems in einem Eintrag 64 Zeichen
Länge der Quellplattform des Eintrags in einem Eintrag 64 Zeichen
Länge der Eintragsquellenlabels in einem Eintrag 128 Zeichen für jeden Schlüssel und Wert
Größe des JSON-Inhalts in einem Aspekt 120 KB
Gesamtgröße eines Eintrags 5 MB
Maximale Anzahl von Aspekten in einem Eintrag 10.000
Länge des Anzeigenamens des Eintragstyps, Aspekttyps und der Eintragsgruppe 256
Länge der Beschreibung von Eintragstyp, Aspekttyp und Eintragsgruppe 1.024
Maximale Anzahl der erforderlichen Aspekttypen in einem Eintragstyp 20
Maximale Anzahl von Aufzählungswerten in einer Vorlage für Aspekttypen 1.024
Maximale Anzahl von Elementen in Dataplex-Suchergebnissen 500