Tarifs de Knowledge Catalog (anciennement Dataplex)

Dataplex Universal Catalog est devenu Knowledge Catalog. Les SKU de tarification conserveront le nom Dataplex. Les tarifs de Dataplex sont basés sur le paiement à l'usage. Dataplex facture actuellement les SKU suivants :

  • Traitement Dataplex Universal Catalog (standard et premium)
  • Stockage de métadonnées

Voici un aperçu général de la facturation de chaque fonctionnalité clé de Dataplex Universal Catalog :

Capacité

Collecte de métadonnées Cloud Storage

Standard

N/A

Traçabilité des données

Premium

Oui

Qualité des données

Premium

Oui, si elle est publiée dans le catalogue

Profilage des données

Premium

Oui, si elle est publiée dans le catalogue

Enrichir les métadonnées dans Dataplex Universal Catalog

N/A

Oui

Les fonctionnalités de Dataplex optimisées par Gemini, y compris les fonctionnalités de génération automatique de métadonnées et d'insights sur les données, sont facturées dans le cadre de Gemini dans BigQuery ou de Gemini Code Assist.

Autres utilisations

Les fonctionnalités d'organisation des données dans Knowledge Catalog (configuration des lacs, des zones ou des éléments), ainsi que l'application et la propagation des règles de sécurité, sont fournies sans frais.

De plus, certaines fonctionnalités de Knowledge Catalog (y compris les analyses de détection, les tâches planifiées d'ingestion de données et de contrôle de la qualité des données, et les connecteurs gérés pour ingérer des métadonnées depuis Cloud SQL et Looker) déclenchent l'exécution de jobs à l'aide de GCS, Managed Service pour Apache Spark, BigQuery, Dataflow et Cloud Scheduler. Ces utilisations sont facturées selon les modèles de tarification de GCS, Managed Service pour Apache Spark, BigQuery, Dataflow et Cloud Scheduler, respectivement. Les frais correspondants apparaissent sous GCS, Managed Service pour Apache Spark, BigQuery et Dataflow, et non sous Dataplex Universal Catalog.

Tarifs de traitement Dataplex Universal Catalog pour Knowledge Catalog

Les traitements standards et Premium de Dataplex Universal Catalog sont mesurés par l'unité de calcul de données (DCU). Les unités de calcul de données sont une unité de facturation abstraite pour Dataplex Universal Catalog. La mesure réelle dépend des fonctionnalités individuelles que vous utilisez.

Tarifs du traitement standard de Dataplex Universal Catalog pour Knowledge Catalog

Le niveau standard de Dataplex Universal Catalog couvre la fonctionnalité de découverte de données qui détecte les métadonnées dans les données gérées par Dataplex Universal Catalog. Voici les prix pour la région de votre choix.

  • Johannesburg (africa-south1)
  • Taiwan (asia-east1)
  • Hong Kong (asia-east2)
  • Tokyo (asia-northeast1)
  • Osaka (asia-northeast2)
  • Seoul (asia-northeast3)
  • Mumbai (asia-south1)
  • Singapore (asia-southeast1)
  • Jakarta (asia-southeast2)
  • Bangkok (asia-southeast3)
  • Sydney (australia-southeast1)
  • Melbourne (australia-southeast2)
  • Warsaw (europe-central2)
  • Finland (europe-north1)
  • Stockholm (europe-north2)
  • Madrid (europe-southwest1)
  • Belgium (europe-west1)
  • Berlin (europe-west10)
  • Turin (europe-west12)
  • London (europe-west2)
  • Frankfurt (europe-west3)
  • Netherlands (europe-west4)
  • Zurich (europe-west6)
  • Milan (europe-west8)
  • Paris (europe-west9)
  • Doha (me-central1)
  • Dammam (me-central2)
  • Tel Aviv (me-west1)
  • Montreal (northamerica-northeast1)
  • Toronto (northamerica-northeast2)
  • Mexico (northamerica-south1)
  • Sao Paulo (southamerica-east1)
  • Santiago (southamerica-west1)
  • Iowa (us-central1)
  • Oklahoma (us-central2)
  • South Carolina (us-east1)
  • Northern Virginia (us-east4)
  • Columbus (us-east5)
  • Dallas (us-south1)
  • Oregon (us-west1)
  • Los Angeles (us-west2)
  • Salt Lake City (us-west3)
  • Las Vegas (us-west4)
Afficher les options de remise
Élément

Outil de mesure

Default* (USD)
BigQuery CUD - 1 Year* (USD)
BigQuery CUD - 3 Year* (USD)

Traitement Dataplex

par unité de calcul de données et par unité de temps

0,06 $US0,054 $US0,048 $US
* Chaque modèle de consommation est associé à un identifiant unique. Vous devrez peut-être vous inscrire pour être éligible aux remises sur le modèle de consommation. Cliquez ici pour en savoir plus.

Quota sans frais de Dataplex Universal Catalog pour Knowledge Catalog

Dans le cadre de la version sans frais de Google Cloud, vous bénéficiez de ressources sans frais avec Knowledge Catalog dans la limite des conditions fixées. Ce quota est disponible pendant et après l'essai sans frais. Si vous dépassez les limites d'utilisation et que l'essai sans frais est terminé, le service vous sera facturé selon les tarifs décrits dans les sections ci-dessus.

Remarque : Le niveau sans frais de Knowledge Catalog n'est disponible que pour le SKU de traitement standard de Dataplex Universal Catalog, et non pour le SKU de traitement premium de Dataplex Universal Catalog.

Ressource

Limites mensuelles d'utilisation sans frais

Traitement Dataplex Universal Catalog

100 heures d'unités de calcul de données

Tarifs du traitement Premium de Dataplex Universal Catalog pour Knowledge Catalog

Le niveau de traitement Premium de Dataplex couvre la traçabilité, la qualité et le profilage des données.

  • Johannesburg (africa-south1)
  • Taiwan (asia-east1)
  • Hong Kong (asia-east2)
  • Tokyo (asia-northeast1)
  • Osaka (asia-northeast2)
  • Seoul (asia-northeast3)
  • Mumbai (asia-south1)
  • Delhi (asia-south2)
  • Singapore (asia-southeast1)
  • Jakarta (asia-southeast2)
  • Bangkok (asia-southeast3)
  • Sydney (australia-southeast1)
  • Melbourne (australia-southeast2)
  • Warsaw (europe-central2)
  • Finland (europe-north1)
  • Stockholm (europe-north2)
  • Madrid (europe-southwest1)
  • Belgium (europe-west1)
  • Berlin (europe-west10)
  • Turin (europe-west12)
  • London (europe-west2)
  • Frankfurt (europe-west3)
  • Netherlands (europe-west4)
  • Zurich (europe-west6)
  • Milan (europe-west8)
  • Paris (europe-west9)
  • Doha (me-central1)
  • Dammam (me-central2)
  • Tel Aviv (me-west1)
  • Montreal (northamerica-northeast1)
  • Toronto (northamerica-northeast2)
  • Mexico (northamerica-south1)
  • Sao Paulo (southamerica-east1)
  • Santiago (southamerica-west1)
  • Iowa (us-central1)
  • Oklahoma (us-central2)
  • South Carolina (us-east1)
  • Northern Virginia (us-east4)
  • Columbus (us-east5)
  • Alabama (us-east7)
  • Dallas (us-south1)
  • Oregon (us-west1)
  • Los Angeles (us-west2)
  • Salt Lake City (us-west3)
  • Las Vegas (us-west4)
  • Phoenix (us-west8)
Afficher les options de remise
Élément

Outil de mesure

Default* (USD)
BigQuery CUD - 1 Year* (USD)
BigQuery CUD - 3 Year* (USD)

Tarifs du traitement Premium de Dataplex

par unité de calcul de données et par unité de temps

0,089 $US0,0801 $US0,0712 $US
* Chaque modèle de consommation est associé à un identifiant unique. Vous devrez peut-être vous inscrire pour être éligible aux remises sur le modèle de consommation. Cliquez ici pour en savoir plus.

Calcul des frais DCU

Les frais en UC de données pour chaque fonctionnalité sont calculés comme suit :

1. Analyses de la qualité automatique des données :

  • La consommation en heures-DCU est proportionnelle au traitement nécessaire pour profiler les données et calculer les métriques de qualité des données. La facturation s'effectue à la seconde, avec un minimum d'une minute.
  • Les frais dépendent du nombre de lignes et de colonnes, de la quantité de données analysées, de la configuration des règles de qualité des données, des paramètres de partitionnement et de clustering de la table, et de la fréquence d'analyse.
  • Les frais liés aux DCU ne s'appliquent pas aux analyses de détection d'anomalies de qualité des données. Les tarifs standards de BigQuery pour le calcul, le stockage, l'entraînement, le traitement et le déploiement des modèles BQML s'appliquent.
  • L'utilisation d'une identité d'exécution personnalisée modifie la façon dont vous êtes facturé pour l'analyse. Lorsque vous spécifiez une identité d'exécution personnalisée, les coûts de calcul et de stockage associés à l'analyse sont facturés directement à votre projet BigQuery, sans passer par les SKU Dataplex Premium standards.

2. Voici plusieurs options pour réduire le coût des analyses automatiques de la qualité des données :

3. Pour filtrer les frais agrégés, utilisez les étiquettes suivantes disponibles dans l'exportation de la facturation dans BigQuery :

  • goog-dataplex-datascan-data-source-dataplex-entity
  • goog-dataplex-datascan-data-source-dataplex-lake
  • goog-dataplex-datascan-data-source-dataplex-zone
  • goog-dataplex-datascan-data-source-project
  • goog-dataplex-datascan-data-source-region
  • goog-dataplex-datascan-id
  • goog-dataplex-datascan-job-id

4. Analyses de profilage des données :

  • La consommation en heures-DCU est proportionnelle au traitement nécessaire pour profiler les données et calculer les métriques de qualité des données. La facturation s'effectue à la seconde, avec un minimum d'une minute.
  • Les frais dépendent du nombre de lignes et de colonnes, de la quantité de données analysées, des paramètres de partitionnement et de clustering de la table, et de la fréquence de l'analyse.
  • L'utilisation d'une identité d'exécution personnalisée modifie la façon dont vous êtes facturé pour l'analyse. Lorsque vous spécifiez une identité d'exécution personnalisée, les coûts de calcul et de stockage associés à l'analyse sont facturés directement à votre projet BigQuery, sans passer par les SKU Dataplex Premium standards.

5. Voici plusieurs options pour réduire le coût des analyses de profilage des données :

  • Échantillonnage
  • Analyses incrémentales
  • Filtrage de colonne
  • Filtrage des lignes
  • Pour séparer les frais de profilage des données des autres frais associés au SKU de traitement premium Dataplex, utilisez l'étiquette goog-dataplex-workload-type avec la valeur DATA_PROFILE dans le rapport Cloud Billing.

6. Pour filtrer les frais agrégés, utilisez les étiquettes suivantes disponibles dans l'exportation de la facturation dans BigQuery :

  • goog-dataplex-datascan-data-source-dataplex-entity
  • goog-dataplex-datascan-data-source-dataplex-lake
  • goog-dataplex-datascan-data-source-dataplex-zone
  • goog-dataplex-datascan-data-source-project
  • goog-dataplex-datascan-data-source-region
  • goog-dataplex-datascan-id
  • goog-dataplex-datascan-job-id

Tarifs de Data Lineage

Vous payez la puissance de calcul consommée par la création automatique de graphiques de traçabilité à partir des systèmes Google Cloud compatibles. La facturation apparaît dans le projet dans lequel vous avez exécuté le job.

Pour séparer les frais de traçabilité des données des autres frais associés au SKU de traitement premium Dataplex, utilisez l'étiquette goog-dataplex-workload-type avec la valeur LINEAGE dans le rapport Cloud Billing.

Utilisation facturable et non facturable

Les activités suivantes entraînent des frais :

  • Analyse automatique de la traçabilité : consomme des heures d'unité de calcul de données (DCU) en fonction de la complexité du traitement. Les DCU mesurent la capacité de calcul abstraite allouée pour effectuer l'analyse. La consommation est calculée en fonction du nombre de jobs, d'exécutions de jobs et de liens de traçabilité créés. 

Ces coûts sont facturés lorsque le type de source Origin de l'API Data Lineage est défini sur une valeur autre que CUSTOM. Les valeurs telles que BIGQUERY, DATAPROC ou COMPOSER indiquent que la traçabilité est extraite automatiquement par Google Cloud à partir des journaux et des métadonnées du service. Ce processus d'extraction nécessite des ressources de calcul (DCU), ce qui explique pourquoi il est facturable. En revanche, CUSTOM indique que vous avez effectué l'analyse vous-même et que vous ne stockez que le résultat, ce qui est sans frais.

Les activités suivantes sont sans frais :

  • Rapports de traçabilité personnalisés : la traçabilité des rapports à partir de systèmes tiers ou d'intégrations personnalisées (où la valeur de sourceType est CUSTOM) est sans frais. Cela inclut les méthodes suivantes :
  • Appeler ProcessOpenLineageRunEvent, qui vous permet d'importer des événements compatibles avec OpenLineage
  • Créer un LineageEvent à l'aide d'un client personnalisé pour signaler manuellement les événements de traçabilité natifs
  • Processus et exécutions de rapports : la création de rapports sur les métadonnées de processus elles-mêmes est sans frais. Les frais ne s'appliquent qu'à l'analyse automatique des LineageEvents.
  • Consommation de la traçabilité : la récupération de la traçabilité (à l'aide des méthodes Get ou List) et la suppression de la traçabilité (à l'aide des méthodes Delete) sont sans frais.

Exemple de tarification

Dans cet exemple, vous allez activer la traçabilité des données pour suivre la traçabilité de BigQuery dans votre projet. Le projet se trouve dans la région us-central1, où une heure de DCU coûte 0,089 $.

Le coût de la création d'un rapport de traçabilité vers ou depuis une EntityReference est d'environ 0,0056 DCU-heure. Un EntityReference identifie de manière unique une ressource de données dans Google Cloud, comme une table BigQuery ou un bucket Cloud Storage.

  • Job quotidien : vous exécutez le job BigQuery suivant une fois par jour pendant 30 jours :

CREATE TABLE tableB1 AS SELECT * FROM tableA JOIN tableC USING (column);

Résultat : cette opération génère des liens de traçabilité qui connectent deux tables sources à une table cible (trois entités distinctes).

  • Tâche exécutée tous les deux jours : vous exécutez la tâche suivante tous les deux jours (15 fois par mois) :

CREATE TABLE tableB2 AS SELECT * FROM tableA, tableC, tableD;

Résultat : cette opération génère des liens de traçabilité qui connectent trois tables sources à une table cible (quatre entités distinctes).

Calcul des coûts

Pour ce mois, supposons que 1 Gio de métadonnées de traçabilité des données a été généré. Les coûts sont calculés comme suit :

  • Tâche quotidienne : 30 jours x 3 entités x ~0,0056 DCU-heures x 0,089 $ ~= 0,045 $
  • Travail un jour sur deux : 15 jours x 4 entités x 0,0056 heure-DCU x 0,089 $ = 0,030 $
  • Stockage : (1 Gio - 1 Mio sans frais) x 2 $ = 1,998 $

Total : ~0,045 $ + 0,030 $ + 1,998 $ = ~2,07 $

Tarifs du stockage des métadonnées Knowledge Catalog (Dataplex Universal Catalog)

Tarifs applicables au stockage de métadonnées

Knowledge Catalog utilise le SKU de stockage de métadonnées pour facturer le stockage de métadonnées. Le stockage de métadonnées est mesuré en gibioctets (Gio), et 1 Gio correspond à 1 073 741 824 octets. Knowledge Catalog mesure la quantité moyenne de métadonnées stockées sur un court intervalle de temps. Pour la facturation, la moyenne de ces mesures est calculée sur une période d'un mois, et cette moyenne est multipliée par le tarif mensuel.

Remarque : Le stockage des métadonnées techniques ingérées automatiquement à partir de services Google Cloud, tels que BigQuery, est proposé sans frais.

Si vous ne payez pas en USD, les tarifs indiqués dans votre devise sur la page relative aux SKU de Cloud Platform s'appliquent.

Tarifs du stockage Knowledge Catalog

Les frais de stockage des métadonnées (y compris ceux des entrées et des aspects) sont facturés au projet dans lequel la ressource correspondante a été créée.

Stockage moyen mensuel

Prix (USD)

Tous

0,002739726 $US / 1 gibibyte hour

Lorsqu'une ressource Data Catalog est disponible simultanément dans Dataplex Universal Catalog, vous n'êtes facturé que pour une seule instance active de cette ressource.

Frais d'API Dataplex Universal Catalog pour Knowledge Catalog

Les appels d'API sont sans frais lorsque les utilisateurs interagissent avec Knowledge Catalog, y compris pour les actions suivantes :

  • Créer et gérer des ressources Dataplex Universal Catalog
  • Créer et gérer des ressources de traçabilité
  • Recherche dans le catalogue

Exemple de tarification

Cette section fournit des exemples de calcul du coût de Dataplex Universal Catalog.

Petits aspects

  • L'utilisateur A crée et applique de petits aspects (1 024 octets chacun). Pour 10 $ par mois, il peut stocker 5 Gio de métadonnées, soit environ 5 millions d'aspects. En supposant qu'il y ait un aspect par table, cela représente un total de 5 millions de tables avec des aspects.
  • L'utilisateur B crée 5 millions d'aspects de 1 Ko chacun le 10 du mois et les supprime le 20. Le coût est de 3,33 $, calculé comme suit : 5 Gio de données divisés par un tiers du mois :
  • Exemple
Chargement en cours...

Aspects importants

  • L'utilisateur C crée et applique de grands aspects (10 Ko chacun). Pour 10 $ par mois, il peut stocker 5 Gio de métadonnées, soit environ 500 000 aspects. En supposant qu'il y ait un aspect par table, cela représente un total de 500 000 tables avec des aspects.
  • L'utilisateur D crée 10 000 types d'aspects (par exemple, ETL, gouvernance des données, qualité des données) et applique de grands aspects (10 Ko chacun) à l'aide de chacun des 10 types d'aspects. Pour 10 $ par mois, il peut stocker 5 Gio de métadonnées, soit environ 500 000 aspects. En supposant qu'il y a 10 aspects par table, cela représente un total de 50 000 tables avec des aspects.

Tarifs de Data Catalog (obsolète)

Cette section décrit la tarification de Data Catalog, qui est en phase d'abandon (transition vers Dataplex Universal Catalog pour éviter toute interruption de service).

Des frais Data Catalog s'appliquent au stockage de métadonnées pour Data Catalog et aux appels d'API effectués vers l'API Data Catalog.

Les frais de stockage de métadonnées et d'appels d'API sont comptabilisés quotidiennement. Vous pouvez consulter les données concernant l'utilisation non facturée dans la console Google Cloud.

Remarque : Les modèles de tarification s'appliquent aux comptes, et non aux projets, sauf indication contraire.

Tarifs de stockage de Data Catalog

Stockage moyen mensuel

Prix (USD)

Jusqu'à 1 Mio

Sans frais

Plus d'1 Mio

0,002739726 $US / 1 gibibyte hour

Frais liés à l'API Data Catalog

Les appels d'API Data Catalog sont facturés comme décrit dans le tableau suivant :

Remarque : Les requêtes de recherche effectuées sur la page Data Catalog de la console Google Cloud sont proposées sans frais.

Élément

Prix (USD)

Appels d'API

0 count to 1,000,000 count
0,00 $US (Free) / 100,000 count, per 1 month / account
1,000,000 count and above
10,00 $US / 100,000 count, per 1 month / account

Si vous ne payez pas en USD, les tarifs indiqués dans votre devise sur la page des codes SKU de Cloud Platform s'appliquent.

Étapes suivantes

Demander un devis personnalisé

Avec le paiement à l'usage de Google Cloud, vous ne payez que pour les services que vous utilisez. Contactez notre équipe commerciale pour obtenir un devis personnalisé pour votre entreprise.
  • Produits Google Cloud
  • Parcourez plus de 100 produits. Les nouveaux clients bénéficient de 300 $ de crédits gratuits pour exécuter, tester et déployer des charges de travail. Tous les clients peuvent utiliser plus de 25 produits gratuitement, dans les limites mensuelles spécifiées.
Google Cloud