Panoramica sulla sicurezza di Cloud Composer

Cloud Composer 1 | Cloud Composer 2 | Cloud Composer 3

Cloud Composer offre una serie di funzionalità di sicurezza e conformità utili per le aziende con requisiti di sicurezza più rigorosi.

Queste tre sezioni presentano informazioni su Cloud Composer funzionalità di sicurezza:

Funzionalità di sicurezza di base

In questa sezione sono elencate le funzionalità di sicurezza fornite per impostazione predefinita per ogni nell'ambiente Cloud Composer.

Crittografia dei dati inattivi

Cloud Composer utilizza la crittografia at-rest in Google Cloud.

Cloud Composer archivia i dati in diversi servizi. Ad esempio, il DB dei metadati di Airflow utilizza il database Cloud SQL e i DAG vengono archiviati nei bucket Cloud Storage.

Per impostazione predefinita, i dati vengono criptati utilizzando chiavi di crittografia gestite da Google.

Se preferisci, puoi configurare gli ambienti Cloud Composer per criptati con chiavi di crittografia gestite dal cliente.

Accesso uniforme a livello di bucket

L'accesso uniforme a livello di bucket consente di controllare in modo uniforme l'accesso alle risorse Cloud Storage. Questo meccanismo si applica anche al bucket del tuo ambiente, che immagazzina i DAG e i plug-in.

Autorizzazioni utente

Cloud Composer offre diverse funzionalità per la gestione delle autorizzazioni utente:

  • Ruoli e autorizzazioni IAM. Cloud Composer di ambienti di un progetto Google Cloud sono accessibili solo agli utenti i cui account vengono aggiunti a IAM del progetto.

  • Ruoli e autorizzazioni specifici di Cloud Composer. Tu assegna questi ruoli e autorizzazioni agli account utente del tuo progetto. Ogni ruolo definisce i tipi di operazioni che un account utente può eseguire negli ambienti Cloud Composer del progetto.

  • Controllo dell'accesso all'UI di Airflow. Gli utenti del tuo progetto possono avere livelli di accesso diversi nell'interfaccia utente di Airflow. Questo meccanismo è chiamato Controllo dell'accesso all'UI di Airflow (basato su ruoli di Airflow controllo degli accessi o RBAC di Airflow).

  • Condivisione limitata dei domini (DRS). Cloud Composer supporta il criterio dell'organizzazione di condivisione limitata per i domini. Se utilizzi questo criterio, solo gli utenti dei domini selezionati potranno per accedere agli ambienti.

Ambienti IP privati

Puoi creare ambienti Cloud Composer nella configurazione di rete IP privato. È inoltre possibile è possibile passare un ambiente esistente alla rete con IP privato configurazione.

In modalità IP privato, i componenti Airflow del tuo ambiente (e quindi i tuoi DAG) non hanno accesso a internet pubblico. A seconda di come configuri la rete VPC, un ambiente IP privato può accedere a internet tramite la rete VPC.

Il cluster del tuo ambiente utilizza Shielded VM

Le VM schermate sono macchine virtuali (VM) su Google Cloud protette da un set di controlli di sicurezza che contribuiscono alla difesa da rootkit e bootkit.

Gli ambienti Cloud Composer utilizzano VM schermate per l'esecuzione tra i nodi del cluster dell'ambiente.

Funzionalità di sicurezza avanzate

Questa sezione elenca le funzionalità avanzate relative alla sicurezza per gli ambienti Cloud Composer.

Chiavi di crittografia gestite dal cliente (CMEK)

Cloud Composer supporta chiavi di crittografia gestite dal cliente (CMEK). Le chiavi CMEK ti forniscono un maggiore controllo sulle chiavi utilizzate per criptare i dati at-rest all'interno di un progetto Google Cloud.

Puoi utilizzare CMEK con Cloud Composer per criptare e decriptare i dati generati da un ambiente Cloud Composer.

Supporto di Controlli di servizio VPC (VPC SC)

Controlli di servizio VPC è un meccanismo per mitigare i rischi di esfiltrazione di dati.

Cloud Composer può essere selezionato come servizio sicuro all'interno un perimetro dei Controlli di servizio VPC. Tutte le risorse sottostanti utilizzate da Cloud Composer è configurato per supportare i Controlli di servizio VPC dell'architettura e seguirne le regole. Solo gli ambienti IP privati può essere creato in un perimetro SC VPC.

Il deployment di ambienti Cloud Composer con Controlli di servizio VPC offre:

  • Riduzione del rischio di esfiltrazione di dati.

  • Protezione dall'esposizione dei dati dovuta a controlli di accesso configurati in modo errato.

  • Riduzione del rischio che utenti malintenzionati copino dati in risorse Google Cloud non autorizzate o che hacker esterni accedano alle risorse Google Cloud da internet.

Livelli di controllo dell'accesso di rete (ACL) del server web

Per i server web Airflow in Cloud Composer viene sempre eseguito il provisioning con un indirizzo IP accessibile dall'esterno. Puoi controllare da quali indirizzi IP si può accedere all'interfaccia utente di Airflow. Cloud Composer supporta IPv4 e Intervalli IPv6.

Puoi configurare le limitazioni di accesso al server web nella console Google Cloud, in gcloud, nell'API e in Terraform.

Secret Manager come spazio di archiviazione per i dati di configurazione sensibili

In Cloud Composer, puoi configurare Airflow in modo che utilizzi Secret Manager come backend in cui vengono archiviate le variabili di connessione di Airflow.

Gli sviluppatori di DAG possono anche leggere le variabili e le connessioni memorizzate in Secret Manager dal codice DAG.

Conformità agli standard

Consulta le pagine linkate di seguito per verificare la conformità di Cloud Composer a vari standard:

Vedi anche

Alcune delle funzionalità di sicurezza menzionate in questo articolo sono descritte nella presentazione del summit Airflow 2020: Esegui DAG Airflow in modo sicuro.

Passaggi successivi