Criteri di audit


Questa pagina fornisce una panoramica del criterio di logging degli audit in Google Kubernetes Engine (GKE). Questa pagina spiega in che modo GKE acquisisce e registra gli eventi nel tuo cluster, i fattori che influiscono sulle informazioni registrate, dove vengono archiviate e i criteri che influiscono su ciò che visualizzi nei log di controllo.

Per istruzioni su come attivare e visualizzare i diversi tipi di log di controllo, nonché sulle autorizzazioni IAM richieste, consulta le informazioni sul logging di controllo di GKE.

Questa pagina è rivolta agli specialisti della sicurezza che vogliono ottenere informazioni sulle attività che si verificano nei cluster per monitorare le minacce alla sicurezza, tenere traccia delle modifiche e risolvere i problemi. Per scoprire di più sui ruoli comuni e sulle attività di esempio a cui facciamo riferimento nei Google Cloud contenuti, consulta Ruoli e attività utente comuni di GKE Enterprise.

Prima di leggere questa pagina, assicurati di conoscere i seguenti argomenti:

Panoramica dei criteri di audit

In un cluster GKE, il server API Kubernetes scrive le voci degli audit log in un backend gestito da GKE. Quando GKE riceve le voci di log dal server dell'API Kubernetes, le scrive nel log delle attività di amministrazione e nel log degli accessi ai dati del progetto.

Esistono due criteri che influiscono su ciò che vedi nei log di controllo del progetto:

  • Il criterio di controllo Kubernetes definisce le regole per cui gli eventi vengono registrati come voci di log. Specifica inoltre quali dati devono includere le voci di log.

  • Il criterio di controllo GKE determina quali voci vengono scritte nel log delle attività di amministrazione e quali nel log degli accessi ai dati.

Gli audit log scritti nel log di accesso ai dati dipendono dalla configurazione degli audit log. I log di accesso ai dati utilizzano i prezzi di Google Cloud Observability. I log delle attività di amministrazione sono offerti senza costi aggiuntivi. GKE supporta i seguenti tipi di log di accesso ai dati.

  • ADMIN_READ: operazioni che leggono i metadati delle risorse Kubernetes, come elencare i pod.
  • DATA_READ: operazioni che leggono i dati nelle risorse Kubernetes, ad esempio la lettura dei log di un pod.
  • DATA_WRITE: operazioni che scrivono dati nelle risorse Kubernetes, ad esempio l'aggiornamento dello stato del pod.

Per ulteriori informazioni, consulta Configurare i log di controllo di accesso ai dati.

Criterio di controllo Kubernetes

Il server API Kubernetes segue un criterio specificato nel flag --audit-policy-file del comando kube-apiserver.

Quando GKE avvia il server API Kubernetes, fornisce un file di criteri di controllo impostando il valore del flag --audit-policy-file. Nel repository Kubernetes open source, puoi vedere lo script configure-helper.sh, che genera il file dei criteri di controllo. Puoi visualizzare la maggior parte del file delle norme di controllo esaminando direttamente lo script.

Eventi e fasi

Quando una persona o un componente invia una richiesta al server dell'API Kubernetes, la richiesta passa attraverso uno o più livelli:

Fase Descrizione
RequestReceived Il gestore del controllo ha ricevuto la richiesta.
ResponseStarted Le intestazioni di risposta sono state inviate, ma il corpo della risposta non è stato inviato.
ResponseComplete Il corpo della risposta è stato completato e non verranno inviati altri byte.
Panico Si è verificato un errore interno del server e la richiesta non è stata completata.

Ogni fase di una richiesta genera un evento, che viene elaborato in base a un regola. Il criterio specifica se l'evento deve essere registrato come voce di log e, in caso affermativo, quali dati devono essere inclusi nella voce di log.

Livelli di controllo

Il file dei criteri di controllo Kubernetes contiene un elenco di regole. Nel file delle norme, la prima regola che corrisponde a un evento imposta il livello di controllo per l'evento.

Una regola può specificare uno di questi livelli di controllo:

Livello Descrizione
Nessuno Non creare una voce di log per l'evento.
Metadati Crea una voce di log. Includi i metadati, ma non il corpo della richiesta o il corpo della risposta.
Richiesta Crea una voce di log. Includi i metadati e il corpo della richiesta, ma non il corpo della risposta.
RequestResponse Crea una voce di log. Includi i metadati, il corpo della richiesta e il corpo della risposta.

Ecco un esempio di regola. Se un evento corrisponde alla regola, il server dell'API Kubernetes crea una voce di log a livello Request.

- level: Request
  userGroups: ["system:nodes"]
  verbs: ["update","patch"]
  resources:
    - group: "" # core
      resources: ["nodes/status", "pods/status"]
  omitStages:
    - "RequestReceived"

Un evento corrisponde alla regola se tutte le seguenti condizioni sono vere:

  • L'evento non corrisponde a nessuna regola precedente nel file delle norme.
  • L'identità che effettua la chiamata fa parte del gruppo di utenti system:nodes.
  • La chiamata è una richiesta update o patch.
  • La richiesta riguarda una risorsa nodes/status o pods/status.
  • L'evento non è relativo alla fase RequestReceived della chiamata.

Criterio di audit GKE

Quando GKE riceve voci di log dal server API Kubernetes, applica le proprie norme per determinare quali voci vengono scritte nel Log delle attività di amministrazione del progetto e quali nel log Accesso ai dati.

Per la maggior parte, GKE applica le seguenti regole alle voci dei log provenienti dal server API Kubernetes:

  • Le voci che rappresentano le richieste create, delete e update vengono inserite nel log delle attività di amministrazione.

  • Le voci che rappresentano le richieste get, list e updateStatus vengono inserite nel log di accesso ai dati.

Per informazioni sui prezzi e sui tipi di log abilitati per impostazione predefinita, consulta Dettagli sul logging.

File dei criteri di audit Kubernetes per i cluster GKE

Per i cluster GKE, il file del criterio di controllo Kubernetes inizia con regole che specificano che determinati eventi non devono essere registrati affatto. Per esempio, questa regola indica che qualsiasi richiesta get di kubelet su una risorsa nodes o una risorsa nodes/status non deve essere registrata. Ricorda che un livello di None indica che non deve essere registrato alcun evento corrispondente:

- level: None
  users: ["kubelet"] # legacy kubelet identity
  verbs: ["get"]
  resources:
    - group: "" # core
    resources: ["nodes", "nodes/status"]

Dopo l'elenco delle regole level: None, il file delle norme contiene un elenco di regole che sono casi speciali. Ad esempio, di seguito è riportata una regola per casi speciali che indica di registrare determinate richieste a livello Metadata:

- level: Metadata
    resources:
      - group: "" # core
        resources: ["secrets", "configmaps"]
      - group: authentication.k8s.io
        resources: ["tokenreviews"]
    omitStages:
      - "RequestReceived"

Un evento corrisponde alla regola se tutte le seguenti condizioni sono vere:

  • L'evento non corrisponde a nessuna regola precedente nel file delle norme.
  • La richiesta riguarda una risorsa di tipo secrets, configmaps o tokenreviews.
  • L'evento non è relativo alla fase RequestReceived della chiamata.

Dopo l'elenco delle regole per casi speciali, il file delle norme contiene alcune regole generali. Per visualizzare le regole generali nello script, devi sostituire il valore di known_apis con ${known_apis}. Dopo la sostituzione, ottieni una regola come questa:

- level: Request
  verbs: ["get", "list", "watch"]
  resources:
    - group: "" # core
    - group: "admissionregistration.k8s.io"
    - group: "apiextensions.k8s.io"
    - group: "apiregistration.k8s.io"
    - group: "apps"
    - group: "authentication.k8s.io"
    - group: "authorization.k8s.io"
    - group: "autoscaling"
    - group: "batch"
    - group: "certificates.k8s.io"
    - group: "extensions"
    - group: "metrics.k8s.io"
    - group: "networking.k8s.io"
    - group: "policy"
    - group: "rbac.authorization.k8s.io"
    - group: "settings.k8s.io"
    - group: "storage.k8s.io"
  omitStages:
    - "RequestReceived"

La regola si applica agli eventi che non corrispondono a nessuna regola precedente nel file delle norme e non sono nella fase RequestReceived. La regola prevede che le richieste get, list e watch su qualsiasi risorsa appartenente a uno dei gruppi elencati devano essere registrate a livello Request.

La regola successiva nel file delle norme è la seguente:

- level: RequestResponse
  resources:
    - group: "" # core
    - group: "admissionregistration.k8s.io"
    - group: "apiextensions.k8s.io"
    - group: "apiregistration.k8s.io"
    - group: "apps"
    - group: "authentication.k8s.io"
    - group: "authorization.k8s.io"
    - group: "autoscaling"
    - group: "batch"
    - group: "certificates.k8s.io"
    - group: "extensions"
    - group: "metrics.k8s.io"
    - group: "networking.k8s.io"
    - group: "policy"
    - group: "rbac.authorization.k8s.io"
    - group: "settings.k8s.io"
    - group: "storage.k8s.io"
  omitStages:
    - "RequestReceived"

La regola si applica agli eventi che non corrispondono a nessuna regola precedente nel file delle norme e non sono nella fase RequestReceived. In particolare, la regola non si applica alle richieste di lettura: get, list e watch. La regola si applica invece alle richieste di scrittura come create, update e delete. La regola prevede che le richieste di scrittura debbano essere registrate a livello RequestResponse.

Riepilogo del criterio di controllo di Kubernetes per i cluster GKE

Il seguente elenco riassume il criterio di controllo Kubernetes per i cluster GKE:

  • In generale, le richieste di scrittura come create, update e delete vengono registrate a livello di RequestResponse.

  • In generale, gli eventi get, list e watch vengono registrati a livello di Metadata.

  • Alcuni eventi vengono trattati come casi speciali. Per un elenco definitivo delle richieste che vengono trattate come casi speciali, consulta lo script delle norme. I casi speciali includono quanto segue:

    • Le richieste di aggiornamento e applicazione di patch da parte di kubelet, system:node-problem-detector o system:serviceaccount:kube-system:node-problem-detector su una risorsa nodes/status o una risorsa pods/status vengono registrate a livello di richiesta.

    • Le richieste di aggiornamento e modifica da parte di qualsiasi identità del gruppo system:nodes su una risorsa nodes/status o pods/status vengono registrate a livello di richiesta.

    • Le richieste di deletecollection da parte di system:serviceaccount:kube-system:namespace-controller vengono registrate a livello di richiesta.

    • Le richieste su una risorsa secrets, una risorsa configmaps o una risorsa tokenreviews vengono registrate a livello di metadati.

  • Alcune richieste non vengono registrate affatto. Per un elenco definitivo delle richieste che non vengono registrate, consulta le regole level: None nello script dei criteri. Le seguenti richieste non vengono registrate:

    • Richieste di system:kube-proxy per guardare una risorsa endpoints, una risorsa services o una risorsa services/status.

    • Ricevi richieste per system:unsecured in una risorsa configmaps nello spazio dei nomi kube-system.

    • Ricevi richieste per kubelet su una risorsa nodes o su una risorsa nodes/status.

    • Ricevi richieste da qualsiasi identità nel gruppo system:nodes su una risorsa nodes o nodes/status.

    • Recupera e aggiorna le richieste per system:kube-controller-manager, system:kube-scheduler o system:serviceaccount:endpoint-controller in una risorsa endpoints nello spazio dei nomi kube-system.

    • Ricevi richieste per system:apiserver su una risorsa namespaces, una risorsa namespaces/status o una risorsa namespaces/finalize.

    • Recupera ed elenca le richieste di system:kube-controller-manager su qualsiasi risorsa nel gruppo metrics.k8s.io.

    • Richieste agli URL corrispondenti a /healthz*, /version o /swagger*.

Passaggi successivi