Stimare il costo della profilazione dei dati per un'organizzazione o una cartella

Questa pagina descrive come stimare il costo della profilazione dei dati di BigQuery in un'organizzazione o una cartella. Se vuoi creare una stima per un progetto, consulta Stimare il costo della profilazione dei dati per un singolo progetto.

Per ulteriori informazioni sul profiling dei dati di BigQuery, consulta Profili di dati per dati BigQuery.

Panoramica

Prima di iniziare a generare profili di dati, puoi eseguire una stima per capire quanti dati BigQuery hai e quanto potrebbe costare profilarli. Per eseguire una stima, devi crearne una.

Quando crei una stima, specifica la risorsa (organizzazione, cartella o progetto) contenente i dati di cui vuoi creare il profilo. Puoi impostare i filtri per perfezionare la selezione dei dati. Puoi anche impostare le condizioni che devono essere soddisfatte prima che Sensitive Data Protection profili una tabella. Sensitive Data Protection basa la stima sulla forma, sulle dimensioni e sul tipo di dati al momento della creazione della stima.

Ogni stima include dettagli come il numero di tabelle corrispondenti trovate nella risorsa, le dimensioni totali di tutte queste tabelle e il costo stimato del profilo della risorsa una volta al mese.

Per ulteriori informazioni su come vengono calcolati i prezzi, consulta Prezzi della profilazione dei dati.

Stima dei prezzi

La creazione di un preventivo è senza costi.

Conservazione

Ogni stima viene eliminata automaticamente dopo 28 giorni.

Limitazioni

Se la tua organizzazione o la tua cartella ha un progetto protetto da un perimetro di servizio Controlli di servizio VPC, la funzionalità Protezione dei dati sensibili potrebbe sottostimare la quantità di dati BigQuery nella tua risorsa. Se hai perimetri di servizio, crea una stima per ciascuno in modo indipendente.

Prima di iniziare

Per ottenere le autorizzazioni necessarie per creare e gestire le stime dei costi per il profiling dei dati, chiedi all'amministratore di concederti il ruolo IAM Amministratore DLP (roles/dlp.admin) per l'organizzazione o la cartella. Per saperne di più sulla concessione dei ruoli, consulta Gestire l'accesso a progetti, cartelle e organizzazioni.

Potresti anche riuscire a ottenere le autorizzazioni richieste tramite i ruoli personalizzati o altri ruoli predefiniti.

Creare una stima

  1. Vai alla pagina Crea stima del profilo dati.

    Vai a Crea stima del profilo dati

  2. Seleziona la tua organizzazione.

Le seguenti sezioni forniscono ulteriori informazioni sui passaggi nella pagina Creare stima del profilo dei dati. Al termine di ogni sezione, fai clic su Continua.

Seleziona risorsa da scansionare

Esegui una di queste operazioni:

  • Per creare una stima per un'organizzazione, seleziona Esegui la scansione dell'intera organizzazione.
  • Per creare una stima per una cartella, seleziona Esegui la scansione della cartella selezionata. Quindi, fai clic su Sfoglia e seleziona la cartella.

Filtri e condizioni di input

Puoi saltare questa sezione se vuoi includere tutte le tabelle BigQuery nell'organizzazione o nella cartella nella stima.

In questa sezione, crei filtri per specificare determinati sottoinsiemi di dati che vuoi includere o escludere dalla stima. Per i sottoinsiemi che includi nella stima, specifica anche le eventuali condizioni che una tabella del sottoinsieme deve soddisfare per essere inclusa nella stima.

Per impostare filtri e condizioni:

  1. Fai clic su Aggiungi filtri e condizioni.
  2. Nella sezione Filtri, definisci uno o più filtri che specificano le tabelle che rientrano nell'ambito della stima.

    Specifica almeno uno dei seguenti elementi:

    • Un ID progetto o un'espressione regolare che specifica uno o più progetti.
    • Un ID set di dati o un'espressione regolare che specifica uno o più set di dati.
    • Un ID tabella o un'espressione regolare che specifica una o più tabelle.

    Le espressioni regolari devono seguire la sintassi RE2.

    Ad esempio, se vuoi che tutte le tabelle di un progetto vengano incluse nel filtro, specifica l'ID del progetto e lascia vuoti gli altri due campi.

    Se vuoi aggiungere altri filtri, fai clic su Aggiungi filtro e ripeti questo passaggio.

  3. Se i sottoinsiemi di dati definiti dai filtri devono essere esclusi dalla stima, disattiva l'opzione Includi le tabelle corrispondenti nella stima. Se disattivi questa opzione, le condizioni descritte nel resto di questa sezione vengono nascoste.

  4. (Facoltativo) Nella sezione Condizioni, specifica le condizioni che le tabelle corrispondenti devono soddisfare per essere incluse nella stima. Se salti questo passaggio, la funzionalità Sensitive Data Protection include tutte le tabelle supportate corrispondenti ai tuoi filtri, indipendentemente dalle dimensioni e dalla data di creazione.

    Configura le seguenti opzioni:

    • Condizioni minime: per escludere dalla stima le tabelle piccole o nuove, imposta un numero minimo di righe o l'età della tabella.

    • Condizione di tempo: per escludere le tabelle precedenti, attiva la condizione di tempo. Quindi, scegli una data e un'ora. Qualsiasi tabella creata entro questa data viene esclusa dalla stima.

      Ad esempio, se imposti la condizione temporale su 4/05/22, 23:59, Sensitive Data Protection esclude dalla stima le tabelle create entro il giorno 4 maggio 2022 alle 23:59.

    • Tabelle da profilare: per specificare i tipi di tabelle da includere nella stima, seleziona Includi solo le tabelle di uno o più tipi specificati. Quindi, seleziona i tipi di tabelle da includere.

      Se non attivi questa condizione o se non selezioni alcun tipo di tabella, Sensitive Data Protection include tutte le tabelle supportate nella stima.

    Supponiamo che tu abbia la seguente configurazione:

    • Condizioni minime

      • Numero minimo di righe: 10 righe
      • Durata minima: 24 ore
    • Condizione temporale

      • Timestamp: 4/05/22, 23:59
    • Tabelle da profilare

      L'opzione Includi solo le tabelle di uno o più tipi specificati è selezionata. Nell'elenco dei tipi di tabelle, è selezionata solo l'opzione Profila tabelle BigLake.

    In questo caso, Sensitive Data Protection esclude tutte le tabelle create entro il giorno 4 maggio 2022 alle ore 23:59. Tra le tabelle create dopo questa data e ora, Sensitive Data Protection profila solo le tabelle BigLake che hanno 10 righe o risalgono a almeno 24 ore prima.

  5. Fai clic su Fine.

  6. Se vuoi aggiungere altri filtri e condizioni, fai clic su Aggiungi filtri e condizioni e ripeti i passaggi precedenti.

    L'ultimo elemento nell'elenco di filtri e condizioni è sempre quello etichettato come Filtri e condizioni predefiniti. Questa impostazione predefinita viene applicata alle tavole della risorsa selezionata (organizzazione o cartella) che non corrispondono a nessuno dei filtri e delle condizioni che hai creato.

    Filtri e condizioni predefiniti
  7. Se vuoi modificare i filtri e le condizioni predefiniti, fai clic su Modifica filtri e condizioni e modifica le impostazioni in base alle esigenze.

Gestisci container e fatturazione dell'agente di servizio

In questa sezione, specifica il progetto da utilizzare come container dell'agente di servizio. Puoi chiedere a Protezione dei dati sensibili di creare automaticamente un nuovo progetto oppure scegliere un progetto esistente.

Indipendentemente dal fatto che tu stia utilizzando un agente di servizio appena creato o ne stia riutilizzando uno esistente, assicurati che abbia accesso in lettura ai dati da profilare.

Creare automaticamente un progetto

Se non disponi delle autorizzazioni necessarie per creare un progetto nell'organizzazione, devi selezionarne uno esistente o ottenere le autorizzazioni richieste. Per informazioni sulle autorizzazioni richieste, consulta Ruoli richiesti per lavorare con i profili dei dati a livello di organizzazione o di cartella.

Per creare automaticamente un progetto da utilizzare come contenitore dell'agente di servizio:

  1. Nel campo Container dell'agente di servizio, controlla l'ID progetto suggerito e modificalo se necessario.
  2. Fai clic su Crea.
  3. (Facoltativo) Aggiorna il nome predefinito del progetto.
  4. Seleziona l'account a cui fatturare tutte le operazioni fatturabili relative a questo nuovo progetto, incluse quelle non correlate al rilevamento.

  5. Fai clic su Crea.

Sensitive Data Protection crea il nuovo progetto. L'agente di servizio all'interno di questo progetto verrà utilizzato per l'autenticazione in Sensitive Data Protection e altre API.

Seleziona un progetto esistente

Per selezionare un progetto esistente come container dell'agente di servizio, fai clic sul campo Container dell'agente di servizio e seleziona il progetto.

Imposta la località in cui archiviare la stima

  1. Nell'elenco Posizione della risorsa, seleziona la regione in cui vuoi archiviare questa stima.

    La posizione in cui scegli di archiviare la stima non influisce sui dati da scansionare. Inoltre, non influisce sulla posizione in cui vengono successivamente memorizzati i profili dei dati. I dati vengono analizzati nella stessa regione in cui sono archiviati (come impostato in BigQuery). Per ulteriori informazioni, consulta Considerazioni sulla residenza dei dati.

  2. Rivedi le impostazioni e fai clic su Crea.

Sensitive Data Protection crea la stima e la aggiunge all'elenco delle stime. Poi esegue la stima.

A seconda della quantità di dati nella risorsa, il completamento di una stima può richiedere fino a 24 ore. Nel frattempo, puoi chiudere la pagina Sensitive Data Protection e controllare più tardi. Quando la stima è pronta, viene visualizzata una notifica nella console Google Cloud.

Visualizzare una stima

  1. Vai all'elenco delle stime.

    Vai alle stime

  2. Fai clic sulla stima che vuoi visualizzare. La stima contiene quanto segue:

    • Il numero di tabelle nella risorsa, meno le tabelle escluse tramite filtri e condizioni.
    • La quantità totale di dati a cui corrispondono le tabelle.
    • Il numero di unità di abbonamento necessarie per creare il profilo di questa quantità di dati ogni mese.
    • Il costo del rilevamento iniziale, ovvero il costo approssimativo del profiling delle tabelle trovate. Questa stima si basa solo su un scatto fotografico dei dati attuali e non tiene conto della crescita dei dati in un determinato periodo di tempo.
    • Stime dei costi aggiuntivi per la profilazione solo delle tabelle risalenti a meno di 6, 12 o 24 mesi fa. Queste stime aggiuntive vengono fornite per mostrarti in che modo limitare ulteriormente la copertura dei dati può aiutarti a controllare il costo della profilazione dei dati.
    • Il costo mensile stimato del profilo dei dati, supponendo che l'utilizzo di BigQuery ogni mese sia uguale a quello di questo mese.
    • Un grafico che mostra la crescita di BigQuery nel tempo.
    • I dettagli di configurazione impostati.

Grafico di stima

Ogni stima include un grafico che mostra la crescita storica dei tuoi dati BigQuery. Puoi utilizzare queste informazioni per stimare il costo mensile della profilazione dei dati.

Un grafico che mostra la crescita dei dati di BigQuery

Passaggi successivi