Dataplex Universal Catalog wurde zum Knowledge Catalog weiterentwickelt. Die Preis-SKUs werden weiterhin als Dataplex bezeichnet. Die Dataplex-Preise basieren auf der „Pay as you go“-Nutzung. Dataplex berechnet derzeit Gebühren basierend auf den folgenden SKUs:
Im Folgenden finden Sie eine allgemeine Übersicht darüber, wie die einzelnen Hauptfunktionen von Dataplex Universal Catalog abgerechnet werden:
Funktion | ||
|---|---|---|
Standard | – | |
Premium | Ja | |
Premium | Ja, wenn im Katalog veröffentlicht | |
Premium | Ja, wenn im Katalog veröffentlicht | |
Metadaten in Dataplex Universal Catalog anreichern | – | Ja |
Gemini-basierte Funktionen in Dataplex, einschließlich Datenstatistiken und automatisierter Metadatengenerierung, werden als Teil von Gemini in BigQuery oder Gemini Code Assist abgerechnet.
Sonstige Nutzung
Die Funktionen zur Datenorganisation in Knowledge Catalog (Einrichtung von Lake, Zone oder Asset) sowie die Anwendung und Weitergabe von Sicherheitsrichtlinien werden kostenlos zur Verfügung gestellt.
Darüber hinaus lösen einige Knowledge Catalog-Funktionen (einschließlich Erkennungsscans, geplanter Datenqualitäts- und Datenaufnahmeprozesse sowie verwalteter Connectors für die Aufnahme von Metadaten aus CloudSQL und Looker) die Jobausführung mit GCS, Managed Service for Apache Spark, BigQuery, Dataflow und Cloud Scheduler aus. Diese Nutzungen werden gemäß den Preismodellen von GCS, Managed Service for Apache Spark, BigQuery, Dataflow und Cloud Scheduler abgerechnet. Die Gebühren werden unter GCS, Managed Service for Apache Spark, BigQuery und Dataflow anstelle von Dataplex Universal Catalog angezeigt.
Die Standard- und Premiumverarbeitung im Dataplex Universal Catalog wird nach Data Compute Units (DCUs) abgerechnet. DCU-Stunde ist eine abstrakte Abrechnungseinheit für Dataplex Universal Catalog. Die tatsächliche Messung hängt von den einzelnen Funktionen ab, die Sie verwenden.
Preise für die Standardverarbeitung im Dataplex Universal Catalog für den Knowledge Catalog
Die Standardstufe von Dataplex Universal Catalog umfasst die Funktion zur Datenermittlung, die Metadaten in den von Dataplex Universal Catalog verwalteten Daten ermittelt. Im Folgenden finden Sie die Preise für die Region Ihrer Wahl.
Posten | Meter | Preis (in $) * (USD) | BigQuery CUD - 1 Year* (USD) | BigQuery CUD - 3 Year* (USD) |
|---|---|---|---|---|
Dataplex-Verarbeitung | pro DCU und Zeiteinheit | 0,06 $ | 0,054 $ | 0,048 $ |
Kostenlose Stufe von Dataplex Universal Catalog für Knowledge Catalog
Im Rahmen der kostenlosen Stufe von Google Cloud bietet Knowledge Catalog einige Ressourcen bis zu einem bestimmten Limit kostenlos an. Diese kostenlosen Nutzungslimits sind während des kostenlosen Testzeitraums und auch danach verfügbar. Wenn Sie die Nutzungslimits überschreiten und der kostenlose Testzeitraum abgelaufen ist, fallen die in den obigen Abschnitten genannten Gebühren an.
Hinweis: Die kostenlose Stufe von Knowledge Catalog ist nur für die SKU „Dataplex Universal Catalog Standard Processing“ und nicht für die SKU „Dataplex Universal Catalog Premium Processing“ verfügbar.
Ressource | Monatliche Limits für kostenlose Nutzung |
|---|---|
Dataplex Universal Catalog-Verarbeitung | 100 DCU-Stunden |
Posten | Meter | Preis* (USD) | BigQuery CUD - 1 Year* (USD) | BigQuery CUD - 3 Year* (USD) |
|---|---|---|---|---|
Preise für die Premium-Verarbeitung von Dataplex | pro DCU und Zeiteinheit | 0,089 $ | 0,0801 $ | 0,0712 $ |
Berechnung der DCU-Gebühren
Die DCU-Gebühren für jedes Feature werden so berechnet:
1. Automatische Datenqualitätsscans:
2. Es gibt mehrere Möglichkeiten, die Kosten für automatische Datenqualitätsscans zu senken:
3. Verwenden Sie die folgenden Labels, die im Abrechnungsexport in BigQuery verfügbar sind, um aggregierte Gebühren zu filtern:
4. Datenprofilerstellungsscans:
5. Es gibt mehrere Möglichkeiten, die Kosten für Datenprofilscans zu senken:
6. Verwenden Sie die folgenden Labels, die im Abrechnungsexport in BigQuery verfügbar sind, um aggregierte Gebühren zu filtern:
Sie bezahlen für die Rechenleistung, die durch die automatische Herkunftsberichterstellung von unterstützten Google Cloud-Systemen verbraucht wird. Die Abrechnung erfolgt in dem Projekt, in dem Sie den Job ausgeführt haben.
Wenn Sie die Gebühren für die Datenherkunft von anderen Gebühren in der Dataplex-Premium-Verarbeitungs-SKU trennen möchten, verwenden Sie das Label goog-dataplex-workload-type mit dem Wert LINEAGE im Cloud Billing-Abrechnungsbericht.
Abrechenbare und nicht abrechenbare Nutzung
Für die folgenden Aktivitäten fallen Gebühren an:
Diese Kosten fallen an, wenn der sourceType Origin der Data Lineage API auf einen anderen Wert als CUSTOM festgelegt ist. Werte wie BIGQUERY, DATAPROC oder COMPOSER geben an, dass die Lineage von Google Cloud automatisch aus den Logs und Metadaten des Dienstes extrahiert wird. Dieser Extraktionsprozess erfordert Rechenressourcen (DCUs) und ist daher kostenpflichtig. Im Gegensatz dazu gibt CUSTOM an, dass Sie das Parsing selbst durchgeführt haben und nur das Ergebnis speichern, was kostenlos ist.
Die folgenden Aktivitäten sind kostenlos:
Preisbeispiel
In diesem Beispiel aktivieren Sie die Datenherkunft, um die Herkunft für BigQuery in Ihrem Projekt zu verfolgen. Das Projekt befindet sich am Standort us-central1, wo eine DCU-Stunde 0,089 $ kostet.
Das Melden der Herkunft zu oder von einer EntityReference kostet etwa 0,0056 DCU-Stunden. Eine EntityReference identifiziert eine Datenressource in Google Cloud eindeutig, z. B. eine BigQuery-Tabelle oder einen Cloud Storage-Bucket.
CREATE TABLE tableB1 AS SELECT * FROM tableA JOIN tableC USING (column);
Ergebnis: Bei diesem Vorgang werden Lineage-Verknüpfungen generiert, die zwei Quelltabellen mit einer Zieltabelle verbinden (3 verschiedene Entitäten).
CREATE TABLE tableB2 AS SELECT * FROM tableA, tableC, tableD;
Ergebnis: Bei diesem Vorgang werden Lineage-Verknüpfungen generiert, die drei Quelltabellen mit einer Zieltabelle (4 verschiedene Entitäten) verbinden.
Berechnung der Kosten
Nehmen wir an, dass in diesem Monat 1 GiB an Data-Lineage-Metadaten generiert wurde. Die Kosten werden folgendermaßen berechnet:
Gesamt: ~0,045 $ + 0,030 $ + 1,998 $ = ~2,07 $
Preise für die Herkunft zur Designzeit (Looker Core)
Die Herkunft aus Looker ist eine Herkunft zur Designzeit: Knowledge Catalog leitet sie aus den Modelldefinitionen (z. B. LookML-Ansichten und Explores und die BigQuery-Tabellen, auf die sie verweisen) und nicht aus Jobausführungen ab. Die Datenherkunft zur Designzeit wird unter derselben Dataplex-Premium-Verarbeitungs-SKU wie das automatische Parsen der Datenherkunft abgerechnet, der DCU-Stundenverbrauch wird jedoch anders berechnet:
Die Abrechnung für die Verarbeitung der Designzeit-Herkunft von Looker Core beginnt am 1. März 2027. Looker-Herkunft, die vor diesem Datum gemeldet wurde, ist kostenlos. Wenn Sie die Funktion deaktivieren möchten, finden Sie unter https://docs.cloud.google.com/dataplex/docs/control-lineage-ingestion Informationen zum Aktivieren oder Deaktivieren der Verarbeitung der Datenherkunft in Looker Core.
Preis für den Metadatenspeicher
Knowledge Catalog verwendet die SKU für den Metadatenspeicher, um die Speicherung von Metadaten in Rechnung zu stellen. Der Metadatenspeicher wird in Gibibyte (GiB) gemessen, wobei 1 GiB 1.073.741.824 Byte beträgt. Knowledge Catalog misst in kurzen Abständen die durchschnittliche Menge der gespeicherten Metadaten. Für die Abrechnung werden diese Messungen zu einem Monatsdurchschnitt zusammengefasst, der mit der monatlichen Rate multipliziert wird.
Hinweis: Der Metadatenspeicher für automatisch aufgenommene technische Metadaten aus Google Cloud-Diensten wie BigQuery wird kostenlos angeboten.
Wenn Sie in einer anderen Währung als US-Dollar bezahlen, gelten die Preise, die unter Cloud Platform SKUs für Ihre Währung angegeben sind.
Preise für Knowledge Catalog-Speicher
Gebühren für die Metadatenspeicherung (einschließlich der Gebühren für Einträge und Aspekte) werden dem Projekt in Rechnung gestellt, in dem die jeweilige Ressource erstellt wurde.
Durchschnittlicher monatlicher Speicherplatz | Preis (in $) |
|---|---|
Beliebig | 0,002739726 $ / 1 gibibyte hour |
Dataplex Universal Catalog API-Gebühren für Knowledge Catalog
Wenn Nutzer mit dem Knowledge Catalog interagieren, sind API-Aufrufe kostenlos, einschließlich:
Preisbeispiel
In diesem Abschnitt finden Sie Beispiele für die Berechnung der Kosten für Dataplex Universal Catalog.
Kleine Aspekte
Große Aspekte