Prezzi di Knowledge Catalog (in precedenza Dataplex)

Dataplex Universal Catalog si è evoluto in Knowledge Catalog. Gli SKU di prezzo continueranno a essere denominati Dataplex. I prezzi di Dataplex si basano sull'utilizzo con pagamento a consumo. Attualmente, Dataplex addebita i costi in base ai seguenti SKU:

  • Elaborazione di Dataplex Universal Catalog (standard e premium)
  • Archiviazione dei metadati

Di seguito è riportata una panoramica di alto livello di come viene fatturata ciascuna funzionalità chiave di Dataplex Universal Catalog:

Funzionalità

Raccolta dei metadati di Cloud Storage

Standard

N/A

Data lineage

Premium

Qualità dei dati

Premium

Sì, se pubblicato nel catalogo

Profilazione dei dati

Premium

Sì, se pubblicato nel catalogo

Arricchisci i metadati in Dataplex Universal Catalog

N/A

Le funzionalità basate su Gemini in Dataplex, tra cui gli insight sui dati e le funzionalità di generazione automatica dei metadati, vengono fatturate come parte di Gemini in BigQuery o Gemini Code Assist.

Altro utilizzo

Le funzionalità di organizzazione dei dati in Knowledge Catalog (configurazione lake, zona o asset) e l'applicazione e la propagazione delle policy di sicurezza, vengono fornite senza costi.

Inoltre, alcune funzionalità di Knowledge Catalog (tra cui scansioni di rilevamento, attività pianificate di qualità dei dati e importazione di dati e connettori gestiti per l'importazione di metadati da CloudSQL e Looker) attivano l'esecuzione dei job utilizzando GCS, Managed Service for Apache Spark, BigQuery, Dataflow e Cloud Scheduler. Questi utilizzi vengono addebitati in base ai modelli di prezzo di GCSManaged Service for Apache Spark, BigQuery, Dataflow e Cloud Scheduler, rispettivamente, e gli addebiti verranno visualizzati in GCS, Managed Service for Apache Spark, BigQuery e Dataflow anziché in Dataplex Universal Catalog.

Prezzi di elaborazione di Dataplex Universal Catalog per Knowledge Catalog

L'elaborazione standard e premium di Dataplex Universal Catalog viene misurata in unità di calcolo dei dati (DCU). Un'ora DCU è un'unità di fatturazione astratta per Dataplex Universal Catalog e il monitoraggio effettivo dipende dalle singole funzionalità che utilizzi.

Prezzi dell'elaborazione standard di Dataplex Universal Catalog per Knowledge Catalog

Il livello standard di Dataplex Universal Catalog include la funzionalità di rilevamento dei dati che rileva i metadati nei dati gestiti da Dataplex Universal Catalog. Di seguito sono riportati i prezzi in base alla regione di tua scelta.

  • Johannesburg (africa-south1)
  • Taiwan (asia-east1)
  • Hong Kong (asia-east2)
  • Tokyo (asia-northeast1)
  • Osaka (asia-northeast2)
  • Seoul (asia-northeast3)
  • Mumbai (asia-south1)
  • Singapore (asia-southeast1)
  • Jakarta (asia-southeast2)
  • Bangkok (asia-southeast3)
  • Sydney (australia-southeast1)
  • Melbourne (australia-southeast2)
  • Warsaw (europe-central2)
  • Finland (europe-north1)
  • Stockholm (europe-north2)
  • Madrid (europe-southwest1)
  • Belgium (europe-west1)
  • Berlin (europe-west10)
  • Turin (europe-west12)
  • London (europe-west2)
  • Frankfurt (europe-west3)
  • Netherlands (europe-west4)
  • Zurich (europe-west6)
  • Milan (europe-west8)
  • Paris (europe-west9)
  • Doha (me-central1)
  • Dammam (me-central2)
  • Tel Aviv (me-west1)
  • Montreal (northamerica-northeast1)
  • Toronto (northamerica-northeast2)
  • Mexico (northamerica-south1)
  • Sao Paulo (southamerica-east1)
  • Santiago (southamerica-west1)
  • Iowa (us-central1)
  • Oklahoma (us-central2)
  • South Carolina (us-east1)
  • Northern Virginia (us-east4)
  • Columbus (us-east5)
  • Dallas (us-south1)
  • Oregon (us-west1)
  • Los Angeles (us-west2)
  • Salt Lake City (us-west3)
  • Las Vegas (us-west4)
Mostra opzioni di sconto
Elemento

Meter

Default* (USD)
BigQuery CUD - 1 Year* (USD)
BigQuery CUD - 3 Year* (USD)

Elaborazione Dataplex

per DCU per unità di tempo

0,06 USD0,054 USD0,048 USD
* Ogni modello di consumo ha un ID univoco. Potresti dover attivare l'opzione per avere diritto agli sconti del modello di consumo. Fai clic qui per scoprire di più.

Livello senza costi di Dataplex Universal Catalog per Knowledge Catalog

Nell'ambito di utilizzo del Livello senza costi di Google Cloud, Knowledge Catalog offre alcune risorse senza costi entro limiti specifici. Questi limiti di utilizzo senza costi sono disponibili sia durante che dopo il periodo di prova senza costi. Se superi questi limiti di utilizzo e il tuo periodo di prova senza costi è scaduto, ti verranno addebitate le tariffe previste, come indicato nelle sezioni precedenti.

Nota: il livello senza costi di Knowledge Catalog è disponibile solo per lo SKU di elaborazione standard di Dataplex Universal Catalog e non per lo SKU di elaborazione premium di Dataplex Universal Catalog.

Risorsa

Limiti di utilizzo senza costi mensili

Elaborazione di Dataplex Universal Catalog

100 DCU/ora

Prezzi dell'elaborazione premium di Dataplex Universal Catalog per Knowledge Catalog

Il livello di elaborazione premium di Dataplex copre la derivazione dei dati, la qualità dei dati e la profilazione dei dati.

  • Johannesburg (africa-south1)
  • Taiwan (asia-east1)
  • Hong Kong (asia-east2)
  • Tokyo (asia-northeast1)
  • Osaka (asia-northeast2)
  • Seoul (asia-northeast3)
  • Mumbai (asia-south1)
  • Delhi (asia-south2)
  • Singapore (asia-southeast1)
  • Jakarta (asia-southeast2)
  • Bangkok (asia-southeast3)
  • Sydney (australia-southeast1)
  • Melbourne (australia-southeast2)
  • Warsaw (europe-central2)
  • Finland (europe-north1)
  • Stockholm (europe-north2)
  • Madrid (europe-southwest1)
  • Belgium (europe-west1)
  • Berlin (europe-west10)
  • Turin (europe-west12)
  • London (europe-west2)
  • Frankfurt (europe-west3)
  • Netherlands (europe-west4)
  • Zurich (europe-west6)
  • Milan (europe-west8)
  • Paris (europe-west9)
  • Doha (me-central1)
  • Dammam (me-central2)
  • Tel Aviv (me-west1)
  • Montreal (northamerica-northeast1)
  • Toronto (northamerica-northeast2)
  • Mexico (northamerica-south1)
  • Sao Paulo (southamerica-east1)
  • Santiago (southamerica-west1)
  • Iowa (us-central1)
  • Oklahoma (us-central2)
  • South Carolina (us-east1)
  • Northern Virginia (us-east4)
  • Columbus (us-east5)
  • Alabama (us-east7)
  • Dallas (us-south1)
  • Oregon (us-west1)
  • Los Angeles (us-west2)
  • Salt Lake City (us-west3)
  • Las Vegas (us-west4)
  • Phoenix (us-west8)
Mostra opzioni di sconto
Elemento

Meter

Default* (USD)
BigQuery CUD - 1 Year* (USD)
BigQuery CUD - 3 Year* (USD)

Prezzi dell'elaborazione premium di Dataplex

per DCU per unità di tempo

0,089 USD0,0801 USD0,0712 USD
* Ogni modello di consumo ha un ID univoco. Potresti dover attivare l'opzione per avere diritto agli sconti del modello di consumo. Fai clic qui per scoprire di più.

Calcolo degli addebiti DCU

Gli addebiti DCU per ogni funzionalità vengono calcolati come segue:

1. Scansioni automatiche della qualità dei dati:

  • Il consumo di ore DCU è proporzionale all'elaborazione necessaria per profilare i dati e calcolare le metriche di qualità dei dati. La fatturazione è al secondo, con un minimo di un minuto.
  • L'addebito dipende dal numero di righe, dal numero di colonne, dalla quantità di dati scansionati, dalla configurazione delle regole di qualità dei dati, dalle impostazioni di partizionamento e clustering della tabella e dalla frequenza della scansione.
  • Per le scansioni di rilevamento delle anomalie della qualità dei dati, non vengono applicati addebiti DCU. Invece, si applicano i prezzi standard di BigQuery per calcolo, archiviazione, addestramento, elaborazione e deployment del modello BQML.
  • L'utilizzo di un'identità di esecuzione personalizzata cambia il modo in cui ti viene addebitata la scansione. Quando specifichi un'identità di esecuzione personalizzata, i costi di calcolo e archiviazione associati alla scansione vengono fatturati direttamente al tuo progetto BigQuery, bypassando gli SKU Dataplex Premium standard.

2. Esistono diverse opzioni per ridurre il costo delle scansioni automatiche della qualità dei dati:

3. Per filtrare gli addebiti aggregati, utilizza le seguenti etichette disponibili nell'esportazione della fatturazione in BigQuery:

  • goog-dataplex-datascan-data-source-dataplex-entity
  • goog-dataplex-datascan-data-source-dataplex-lake
  • goog-dataplex-datascan-data-source-dataplex-zone
  • goog-dataplex-datascan-data-source-project
  • goog-dataplex-datascan-data-source-region
  • goog-dataplex-datascan-id
  • goog-dataplex-datascan-job-id

4. Scansioni di profilazione dei dati:

  • Il consumo di ore DCU è proporzionale all'elaborazione necessaria per profilare i dati e calcolare le metriche di qualità dei dati. La fatturazione è al secondo, con un minimo di un minuto.
  • L'addebito dipende dal numero di righe, dal numero di colonne, dalla quantità di dati scansionati, dalle impostazioni di partizionamento e clustering sulla tabella e dalla frequenza della scansione.
  • L'utilizzo di un'identità di esecuzione personalizzata cambia il modo in cui ti viene addebitata la scansione. Quando specifichi un'identità di esecuzione personalizzata, i costi di calcolo e archiviazione associati alla scansione vengono fatturati direttamente al tuo progetto BigQuery, bypassando gli SKU Dataplex Premium standard.

5. Esistono diverse opzioni per ridurre il costo delle scansioni di profilazione dei dati:

  • Campionamento
  • Scansioni incrementali
  • Filtro delle colonne
  • Filtro delle righe
  • Per separare gli addebiti della profilazione dei dati da altri addebiti nello SKU di elaborazione premium di Dataplex, nel report di fatturazione Cloud, utilizza l'etichetta goog-dataplex-workload-type con il valore DATA_PROFILE.

6. Per filtrare gli addebiti aggregati, utilizza le seguenti etichette disponibili nell'esportazione della fatturazione in BigQuery:

  • goog-dataplex-datascan-data-source-dataplex-entity
  • goog-dataplex-datascan-data-source-dataplex-lake
  • goog-dataplex-datascan-data-source-dataplex-zone
  • goog-dataplex-datascan-data-source-project
  • goog-dataplex-datascan-data-source-region
  • goog-dataplex-datascan-id
  • goog-dataplex-datascan-job-id

Prezzi di Data Lineage

Paghi la potenza di calcolo consumata dalla generazione automatica di report sulla derivazione dai sistemi Google Cloud supportati. La fatturazione viene visualizzata nel progetto in cui hai eseguito il job.

Per separare gli addebiti della derivazione dei dati da altri addebiti nello SKU di elaborazione premium di Dataplex, utilizza l'etichetta goog-dataplex-workload-type con il valore LINEAGE nel report di fatturazione Cloud.

Utilizzo fatturabile e non fatturabile

Le seguenti attività comportano addebiti:

  • Analisi automatica della derivazione: consuma ore di unità di calcolo dei dati (DCU) in base alla complessità dell'elaborazione. Le DCU misurano la capacità di calcolo astratta allocata per eseguire l'analisi. Il consumo viene calcolato in base al numero di job, alle esecuzioni dei job e al numero di collegamenti di derivazione creati. 

Questi costi si verificano quando il sourceType Origin dell'API Data Lineage è impostato su un valore diverso da CUSTOM. Valori come BIGQUERY, DATAPROC o COMPOSER indicano che la derivazione viene estratta automaticamente da Google Cloud dai log e dai metadati del servizio. Questo processo di estrazione richiede risorse di calcolo (DCU), motivo per cui è fatturabile. CUSTOM indica invece che hai eseguito tu stesso l'analisi e stai solo archiviando il risultato, che è senza costi.

Le seguenti attività sono senza costi:

  • Report sulla derivazione personalizzata: la derivazione dei report da sistemi di terze parti o integrazioni personalizzate (in cui sourceType è CUSTOM) è senza costi. Sono inclusi i seguenti metodi:
  • Chiamata di ProcessOpenLineageRunEvent, che consente di importare eventi compatibili con OpenLineage.
  • Creazione di un LineageEvent utilizzando un client personalizzato per segnalare manualmente gli eventi di derivazione nativi.
  • Processi ed esecuzioni di generazione di report: la segnalazione dei metadati del processo è senza costi; i costi si applicano solo all'analisi automatica di LineageEvents.
  • Consumo di origine dati: il recupero dell'origine dati (utilizzando i metodi Get o List) e l'eliminazione dell'origine dati (utilizzando i metodi Delete) sono senza costi.

Esempio di prezzi

In questo esempio, abiliti la derivazione dei dati per tenere traccia della derivazione per BigQuery nel tuo progetto. Il progetto si trova nella località us-central1, dove un'ora di DCU costa 0,089 $.

La generazione di report sulla derivazione da o verso un EntityReference costa circa 0,0056 ore DCU. Un EntityReference identifica in modo univoco una risorsa di dati all'interno di Google Cloud, come una tabella BigQuery o un bucket Cloud Storage.

  • Job giornaliero: esegui il seguente job BigQuery una volta al giorno per 30 giorni:

CREATE TABLE tableB1 AS SELECT * FROM tableA JOIN tableC USING (column);

Risultato: questa operazione genera collegamenti di derivazione che collegano due tabelle di origine a una tabella di destinazione (3 entità distinte).

  • Job a giorni alterni: esegui il seguente job a giorni alterni (15 volte al mese):

CREATE TABLE tableB2 AS SELECT * FROM tableA, tableC, tableD;

Risultato: questa operazione genera collegamenti di derivazione che collegano tre tabelle di origine a una tabella di destinazione (4 entità distinte).

Calcolo dei costi

Per questo mese, supponiamo che siano stati generati 1 GiB di metadati di tracciabilità dei dati. I costi vengono calcolati come segue:

  • Job giornaliero: 30 giorni * 3 entità * ~0,0056 ore DCU * 0,089 $ ~= 0,045 $
  • Lavoro quotidiano alternato: 15 giorni * 4 entità * 0,0056 ore DCU * 0,089 $ = 0,030 $
  • Archiviazione: (1 GiB - 1 MiB di livello senza costi) * 2,00 $ = 1,998 $

Totale: ~0,045$+ 0,030 $+ 1,998 $= ~2,07$

Prezzi di archiviazione dei metadati di Knowledge Catalog (Dataplex Universal Catalog)

Prezzi di archiviazione dei metadati

Knowledge Catalog utilizza lo SKU di archiviazione dei metadati per addebitare i costi di archiviazione dei metadati. L'archiviazione dei metadati viene misurata in gibibyte (GiB), dove 1 GiB corrisponde a 1.073.741.824 byte. Knowledge Catalog misura la quantità media di metadati archiviati in un breve intervallo di tempo. Ai fini della fatturazione, queste misurazioni vengono raggruppate in una media di un mese, moltiplicata per la tariffa mensile.

Nota: l'archiviazione dei metadati per i metadati tecnici importati automaticamente dai servizi Google Cloud, come BigQuery, è offerta senza costi.

Se la valuta utilizzata per il pagamento è diversa dai dollari statunitensi, si applicano i prezzi nella tua valuta elencati negli SKU Cloud Platform.

Prezzi di archiviazione di Knowledge Catalog

Gli addebiti per l'archiviazione dei metadati (inclusi quelli per voci e aspetti) vengono fatturati al progetto in cui è stata creata la risorsa corrispondente.

Archiviazione media mensile

Prezzo (USD)

Qualsiasi

0,002739726 USD / 1 gibibyte hour

Quando una risorsa in Data Catalog viene resa disponibile contemporaneamente in Dataplex Universal Catalog, ti viene addebitata una sola istanza attiva di tale risorsa.

Dataplex Universal Catalog API charges for Knowledge Catalog

Quando gli utenti interagiscono con Knowledge Catalog, le chiamate API sono senza costi, tra cui:

  • Creazione e gestione delle risorse Dataplex Universal Catalog
  • Creazione e gestione delle risorse di derivazione
  • Ricerca nel catalogo

Esempio di prezzi

In questa sezione vengono forniti esempi di come calcolare il costo di Dataplex Universal Catalog.

Piccoli aspetti

  • L'utente A crea e applica aspetti di piccole dimensioni (1024 byte ciascuno). Per 10 $al mese, l'utente può archiviare 5 GiB di metadati, che corrispondono approssimativamente a 5 milioni di aspetti. Supponendo un aspetto per tabella, si tratta di un totale di 5 milioni di tabelle con aspetti.
  • L'utente B crea 5 milioni di aspetti da 1 KB ciascuno il 10 del mese ed elimina gli aspetti il 20. Il costo è di 3,33 $, calcolato come 5 GiB di dati divisi per un terzo del mese:
  • Esempio
Caricamento in corso...

Aspetti di grandi dimensioni

  • L'utente C crea e applica aspetti di grandi dimensioni (10 KB ciascuno). Per 10 $al mese, l'utente può archiviare 5 GiB di metadati, che corrispondono a circa 500.000 aspetti. Supponendo un aspetto per tabella, si tratta di un totale di 500.000 tabelle con aspetti.
  • L'utente D crea 10.000 tipi di aspetto (ad esempio ETL, governance dei dati, qualità dei dati) e applica aspetti di grandi dimensioni (10 KB ciascuno) utilizzando ciascuno dei 10 tipi di aspetto. Per 10 $al mese, l'utente può archiviare 5 GiB di metadati, che corrispondono approssimativamente a 500.000 aspetti. Supponendo 10 aspetti per tabella, si arriva a un totale di 50.000 tabelle con aspetti.

Prezzi di Data Catalog (deprecato)

Questa sezione descrive i prezzi di Data Catalog, che si trova nella fase di deprecazione (transizione a Dataplex Universal Catalog per evitare interruzioni del servizio).

Si applicano gli addebiti di Data Catalog per l'archiviazione dei metadati per Data Catalog e le chiamate API effettuate all'API Data Catalog.

I costi di archiviazione dei metadati e delle chiamate API vengono addebitati su base giornaliera. Puoi visualizzare l'utilizzo non fatturato nella console Google Cloud.

Nota: i modelli di prezzo si applicano agli account, non ai progetti, se non diversamente specificato.

Prezzi di archiviazione di Data Catalog

Archiviazione media mensile

Prezzo (USD)

Fino a 1 MiB

Nessun costo

Oltre 1 MiB

0,002739726 USD / 1 gibibyte hour

Addebiti API Data Catalog

Le chiamate API di Data Catalog vengono fatturate come descritto nella tabella seguente:

Nota: le query di ricerca eseguite nella pagina Data Catalog nella console Google Cloud sono offerte senza costi.

Elemento

Prezzo (USD)

Chiamate API

0 count to 1,000,000 count
0,00 USD (Free) / 100,000 count, per 1 month / account
1,000,000 count and above
10,00 USD / 100,000 count, per 1 month / account

Se la valuta utilizzata per il pagamento è diversa da USD, si applicano i prezzi elencati nella tua valuta negli SKU di Cloud Platform.

Passaggi successivi

Richiedi un preventivo personalizzato

Grazie ai prezzi con pagamento a consumo di Google Cloud, paghi solo per i servizi che utilizzi. Per ricevere un preventivo personalizzato per la tua organizzazione, contatta il nostro team di vendita.
Google Cloud