Kontingente und Limits

In diesem Dokument sind die Kontingente aufgeführt, die für Dataplex gelten.

Google Cloud nutzt Kontingente, um Fairness zu gewährleisten und Spitzen bei Ressourcennutzung und -verfügbarkeit zu reduzieren. Ein Kontingent schränkt ein, wie viel von einer Google Cloud-Ressource Ihr Google Cloud-Projekt nutzen darf. Kontingente gelten für eine Reihe von Ressourcentypen, einschließlich Hardware, Software und Netzwerkkomponenten. Mit Kontingenten können Sie beispielsweise die Anzahl der API-Aufrufe an einen Dienst, die Anzahl der von Ihrem Projekt gleichzeitig verwendeten Load Balancer oder die Anzahl der Projekte begrenzen, die Sie erstellen können. Die Kontingente sollen eine Überlastung von Diensten verhindern und dadurch die Community der Google Cloud-Nutzer schützen. Sie helfen Ihnen auch bei der Verwaltung Ihrer eigenen Google Cloud-Ressourcen.

Das Cloud-Kontingentsystem ermöglicht Folgendes:

  • Ihren Verbrauch von Google Cloud-Produkten und -Diensten überwachen
  • Ihren Verbrauch dieser Ressourcen einschränken
  • Eine Möglichkeit bieten, Änderungen am Kontingentwert anzufordern

Wenn Sie versuchen, mehr von einer Ressource zu verbrauchen, als das Kontingent zulässt, blockiert das System in den meisten Fällen den Zugriff auf die Ressource. Die Aufgabe, die Sie ausführen möchten, schlägt fehl.

Kontingente gelten in der Regel auf Google Cloud-Projektebene. Ihre Nutzung einer Ressource in einem Projekt hat keinen Einfluss auf Ihr verfügbares Kontingent in einem anderen Projekt. Innerhalb eines Google Cloud-Projekts werden die Kontingente für alle Anwendungen und IP-Adressen gemeinsam genutzt.

Für Dataplex-Ressourcen gelten außerdem Limits. Diese Limits stehen nicht im Zusammenhang mit dem Kontingentsystem. Limits können nur geändert werden, wenn dies angegeben ist.

In Dataplex gelten Kontingente für die Anzahl der API-Anfragen in einem bestimmten Zeitraum und die Anzahl der Ressourcen, die in einem Projekt erstellt werden können. Kontingente schützen Sie vor unerwarteten Auslastungsspitzen und Überlastung . Weitere Informationen zu den Gründen für die Erzwingung von Kontingenten

Je mehr Sie Dataplex nutzen, desto höher kann Ihr Kontingentbedarf werden. Wenn ein Kontingent zu niedrig ist, um Ihre Anforderungen zu erfüllen, oder Sie mit einem bevorstehenden steigen, können Sie proaktiv eine Kontingenterhöhung anfordern.

Kontingente für Anfragen

Die Dataplex API erzwingt Kontingente für die Dataplex Catalog-Ressource und Suchanfragen auf unterschiedlichen Ebenen unabhängig von Ursprung. Dies gilt auch für Anfragen direkt aus API-Aufrufen, Clientbibliotheken, Google Cloud CLI und Google Cloud Console.

Für Dataplex-Anfragen gelten die folgenden Kontingente:

Kontingent Standard
Leseanfragen für Einträge und Aspekte pro Projekt pro Region pro Minute 6000
Schreibanfragen für Einträge und Aspekte pro Projekt pro Region pro Minute 1500
Leseanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt, Nutzer und Minute 100
Leseanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt und Minute 200
Schreibanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt, Nutzer und Minute 10
Schreibanfragen für Aspekttypen, Eintragstypen und Eintragsgruppen pro Projekt und Minute 20
Suchanfragen pro Projekt, Minute und Nutzer 900
Suchanfragen pro Projekt und Minute 1.200
Suchanfragen pro Organisation und Minute 2400
Suchanfragen pro Organisation und Tag 345600

Für jede in der folgenden Tabelle aufgeführte Dataplex-Anfrage wird das Kontingent sowohl auf Projektebene als auch auf Projekt- und Nutzerebene durchgesetzt.

Kontingent Beispiele
Leseanfragen für die Ressourcenverwaltung See abrufen, Zonen auflisten
Schreibanfragen für die Ressourcenverwaltung Lake erstellen, Asset löschen
Anfragen für Metadaten abrufen Entität abrufen, Partition abrufen
Anfragen für Metadaten auflisten Entitäten auflisten, Partitionen auflisten
Schreibanfragen für Metadaten Entität aktualisieren, Partition löschen
Leseanfragen für Aufgaben- und Jobressourcen Aufgabe abrufen, Jobs auflisten
Schreibanfragen für Aufgaben- und Jobressourcen Aufgabe erstellen, Job abbrechen
IAM-Richtlinienanfragen festlegen IAM-Richtlinie festlegen

Kontingente für Ressourcen

Das Ressourcenkontingent wird auf Projektebene erzwungen für die folgenden Ressourcentypen: Lake, Zone, Asset, On-Demand-Aufgabe, wiederkehrende Aufgabe. Die aktuelle Nutzung des Dataplex-Kontingents finden Sie in der Google Cloud Console auf der Seite Kontingente.

Kontingenterhöhung anfordern

  1. Öffnen Sie in der Google Cloud Console die Seite Kontingente.

    Kontingente aufrufen

    Auf der Seite wird eine Liste der Kontingente angezeigt.

  2. Wählen Sie die Kontingente aus, die Sie ändern möchten, und klicken Sie auf Kontingente bearbeiten.

  3. Geben Sie das neue Kontingent für das ausgewählte Kontingent ein.

  4. Klicken Sie auf Anfrage senden.

Verwenden Sie zur Erhöhung/Verringerung der meisten Kontingenten die Google Cloud Console. Weitere Informationen finden Sie unter Höheres Kontingentlimit anfordern.

Kontingentabhängigkeiten

Die Nutzung von Dataplex kann andere Google Cloud-Produkte umfassen. Für die Datenermittlung müssen beispielsweise Cloud Storage- und/oder BigQuery APIs aufgerufen werden, um mit den zugrunde liegenden Ressourcen zu interagieren. Diese Produkte haben Kontingente auf Projektebene, einschließlich der Kontingente für Dataplex-Verwendung.

Kontingentseiten anderer Produkte, die Sie mit Dataplex verwenden können:

Diese Liste ist nicht vollständig.

Limits

Die folgenden Limits gelten für Dataplex Catalog und die Dataplex-Suche:

Limit Wert
Größe einer Eintragsanfrage und Aspekt 2 MB
Länge einer Eintrags-ID 4.000 Zeichen
Länge eines vollständig qualifizierten Namens in einem Eintrag 4.000 Zeichen
Länge des Anzeigenamens der Eintragsquelle in einem Eintrag 500 Zeichen
Länge der Beschreibung der Datenquelle in einem Eintrag 2.000 Zeichen
Länge der Eintragsquellenressource in einem Eintrag 4.000 Zeichen
Länge des Systems der Eingabequelle in einem Eintrag 64 Zeichen
Länge der Quellplattform des Eintrags in einem Eintrag 64 Zeichen
Länge der Eintragsquellenlabels in einem Eintrag 128 Zeichen für jeden Schlüssel und Wert
Größe des JSON-Inhalts in einem Aspekt 120 KB
Gesamtgröße eines Eintrags 5 MB
Maximale Anzahl von Aspekten in einem Eintrag 10.000
Länge des Anzeigenamens des Datensatztyps, des Aspekttyps und der Datensatzgruppe 256
Länge der Beschreibung des Eintragstyps, des Aspekttyps und der Eintragsgruppe 1.024
Maximale Anzahl der erforderlichen Aspekttypen in einem Eintragstyp 20
Maximale Anzahl von Aufzählungswerten in einer Vorlage für Aspekttypen 1.024
Maximale Anzahl von Elementen in Dataplex-Suchergebnissen 500