Descripción general
GKE en VMware admite el registro de auditoría a nivel de la API de Cloud y del clúster de Kubernetes. En este documento, se proporciona información sobre el registro de auditoría del clúster de Kubernetes. Para obtener información sobre el registro de auditoría de la API de Cloud, consulta Información de registro de auditoría de la API de Cloud.
GKE en VMware usa el registro de auditoría de Kubernetes, que mantiene un registro cronológico de las llamadas realizadas al servidor de la API de Kubernetes de un clúster. Los registros de auditoría son útiles para investigar solicitudes a la API sospechosas y recopilar estadísticas.
Puedes configurar un clúster para escribir registros de auditoría en el disco o en Cloud Audit Logging en un proyecto de Google Cloud. Escribir en los registros de auditoría de Cloud tiene varios beneficios en comparación con escribir en el disco o incluso capturar registros en un sistema de registro local:
- Los registros de auditoría para todos los clústeres de GKE pueden centralizarse.
- Las entradas de registro escritas en los registros de auditoría de Cloud son inmutables.
- Las entradas de los registros de auditoría de Cloud se retienen durante 400 días.
- Los registros de auditoría de Cloud se incluyen en el precio de Anthos.
Registro de auditoría basado en discos
De forma predeterminada, los registros de auditoría se escriben en un disco persistente para que los reinicios y las actualizaciones de las VM no causen la desaparición de los registros. GKE en VMware conserva hasta 12 GB de entradas de registro de auditoría.
Registros de auditoría de Cloud
Si habilitas los Registros de auditoría de Cloud para un clúster, las entradas del registro de auditoría de actividad del administrador del servidor de la API de Kubernetes del clúster se envían a Google Cloud mediante el proyecto de Google Cloud que especificas en el campo cloudAuditLogging.projectID
del archivo de configuración del clúster.
Este proyecto de Google Cloud se denomina proyecto de registro de auditoría.
El proyecto de registro de auditoría debe ser el mismo que el proyecto host de tu flota.
Para almacenar en búfer y escribir entradas de registro en los registros de auditoría de Cloud, GKE en VMware implementa un Pod audit-proxy
en el clúster de administrador.
Este componente también está disponible como un contenedor de archivo adicional en los clústeres de usuarios.
Limitaciones
La versión actual de los Registros de auditoría de Cloud para GKE en VMware tiene varias limitaciones:
No se admite el registro de acceso a los datos (solicitudes get, list y watch).
No se admite la modificación de la política de auditoría de Kubernetes.
Los registros de auditoría de Cloud no es resiliente a las interrupciones de red ampliada. Si las entradas de registro no se pueden exportar a Google Cloud, se almacenan en caché en un búfer de disco de 10 G. Si se completa ese búfer, se descartan las entradas posteriores.
Habilita la API de auditoría de Anthos
Habilita la API de auditoría de Anthos en tu proyecto de registro de auditoría.
Habilita la API de auditoría de Anthos
Crea una cuenta de servicio para los registros de auditoría de Cloud
Ya tienes una o más cuentas de servicio que creaste para usar con GKE en VMware. Para esta función, debes crear una cuenta de servicio adicional llamada cuenta de servicio de registro de auditoría.
Crea la cuenta de servicio de registro de auditoría:
gcloud iam service-accounts create audit-logging-service-account
Crea un archivo de claves JSON para la cuenta de servicio de los registros de auditoría de Cloud:
gcloud iam service-accounts keys create audit-logging-key.json \ --iam-account AUDIT_LOGGING_SERVICE_ACCOUNT_EMAIL
En el ejemplo anterior, AUDIT_LOGGING_SERVICE_ACCOUNT_EMAIL es la dirección de correo electrónico de la cuenta de servicio.
Guarda
audit-logging-key.json
en la estación de trabajo de administrador en la misma ubicación que tus otras claves de cuenta de servicio.
Crea un clúster de administrador con los registros de auditoría de Cloud habilitados
Puedes habilitar los registros de auditoría de Cloud para un clúster de administrador solo cuando creas el clúster del administrador por primera vez. No puedes modificar un clúster de administrador existente para habilitar los registros de auditoría de Cloud.
Consulta Crea un clúster de administrador.
En el archivo de configuración del clúster de usuario, completa la sección
cloudAuditLogging
.Establece
cloudAuditLogging.projectID
en el ID del proyecto de registro de auditoría.Establece
cloudAuditLogging.clusterLocation
en una región de Google Cloud en la que quieras almacenar los registros de auditoría. Para obtener una latencia mejorada, elige una región que esté cerca de tu centro de datos local.Establece
cloudAuditLogging.serviceAccountKeyPath
en la ruta de acceso del archivo de claves JSON de tu cuenta de servicio de registro de auditoría.
Por ejemplo:
cloudAuditLogging: projectID: "my-project" clusterLocation: "us-west1" serviceAccountKeyPath: "/my-key-folder/audit-logging-key.json"
Continúa con la creación del clúster como de costumbre.
Crea un clúster de usuario con los registros de auditoría de Cloud habilitados
Consulta Crea un clúster de usuario.
En el archivo de configuración del clúster de usuario, completa la sección
cloudAuditLogging
.Establece
cloudAuditLogging.projectID
en el ID del proyecto de registro de auditoría.Establece
cloudAuditLogging.clusterLocation
en una región de Google Cloud en la que quieras almacenar los registros de auditoría. Para obtener una latencia mejorada, elige una región que esté cerca de tu centro de datos local.Establece
cloudAuditLogging.serviceAccounKeyPath
en la ruta de acceso del archivo de claves JSON de la cuenta de servicio de los registros de auditoría de Cloud.Asegúrate de que la sección
gkeConnect
esté completa y quegkeConnect.projectID
sea lo mismo quecloudAuditLogging.projectID
.
Por ejemplo:
gkeConnect: projectID: "my-project" registerServiceAccountKeyPath: "/my-key-fokder/connect-register-key.json" cloudAuditLogging: projectID: "my-project" clusterLocation: "us-west1" serviceAccountKeyPath: "/my-key-folder/audit-logging-key.json"
Continúa con la creación del clúster como de costumbre.
Habilita los registros de auditoría de Cloud para un clúster de usuario existente.
Los registros de auditoría de Cloud solo se pueden habilitar en el proyecto de Google Cloud en el que está registrado el clúster de usuario.
Si un clúster de usuario existente no se registra, regístralo mediante estos pasos antes de habilitar los registros de auditoría de Cloud:
Agrega una sección
gkeConnect
al archivo de configuración del clúster de usuario. Por ejemplo:gkeConnect: projectID: "my-project" registerServiceAccountKeyPath: "/my-key-fokder/connect-register-key.json"
Actualiza el clúster:
gkectl update cluster --config USER_CLUSTER_CONFIG --kubeconfig ADMIN_CLUSTER_KUBECONFIG
Después de registrar el clúster de usuario, sigue estos pasos para habilitar los registros de auditoría de Cloud:
Completa la sección
cloudAuditLogging
de tu archivo de configuración de clústeres de usuarios. Consulta Crea un clúster de usuario con los registros de auditoría de Cloud habilitados para obtener más detalles sobre los campos individuales). ElprojectID
de la seccióncloudAuditLogging
debe ser el mismo que el de la seccióngkeConnect
.Actualiza el clúster:
gkectl update cluster --config USER_CLUSTER_CONFIG --kubeconfig ADMIN_CLUSTER_KUBECONFIG
Inhabilita los registros de auditoría de Cloud para un clúster de usuario existente
En el archivo de configuración del clúster de usuario, borra la sección
cloudAuditLogging
.Actualiza el clúster de usuario:
gkectl update cluster --kubeconfig [ADMIN_CLUSTER_KUBECONFIG] --config [USER_CLUSTER_CONFIG]
Accede a los registros de auditoría
Registro de auditoría basado en discos
Puedes encontrar los registros de auditoría del clúster de administrador en los nodos del plano de control en /var/log/kube-audit/kube-apiserver-audit.log
. Los registros de auditoría para el clúster de usuario se encuentran en la PersistentVolumeClaim
llamada kube-audit-kube-apiserver-0
. Puedes acceder a estos datos dentro de tus propios Pods a través de entradas volumes
:
Agrega esta entrada para el clúster de administrador:
volumes: - name: kube-audit hostPath: path: /var/log/kube-audit type: ""
Agrega esta entrada para el clúster de usuario:
volumes: - name: kube-audit persistentVolumeClaim: claimName: kube-audit-kube-apiserver-0
Para programar tu Pod en el nodo apropiado del clúster de administrador (y solo en este), deberás agregar las secciones nodeSelector
y tolerations
a la especificación del Pod, de la siguiente manera:
spec: nodeSelector: node-role.kubernetes.io/master: '' tolerations: - key: node-role.kubernetes.io/master value: "" effect: NoSchedule
En el clúster de usuario, establece namespace
como el nombre del clúster de usuario y, luego, configura nodeName
como kube-apiserver-0
:
spec: nodeName: NODE_NAME
Para señalar el nodeName
de kube-apiserver-0
, ejecuta el siguiente comando:
kubectl get pod kube-apiserver-0 -n USER_CLUSTER_NAME --kubeconfig kubeconfig -o jsonpath='{.spec.nodeName}'
El nombre de archivo de cada registro de auditoría tiene una marca de tiempo que indica cuándo se rotó el archivo. Un archivo contiene registros de auditoría hasta esa hora y fecha.
Registros de auditoría de Cloud
Console
En la consola de Google Cloud, ve a la página Registros en el menú de Logging.
En el cuadro Filtrar por búsqueda de texto o etiqueta, arriba de los menús desplegables mencionados antes, haz clic en la flecha hacia abajo para abrir el menú desplegable. En el menú, selecciona Convertir a filtro avanzado.
Completa el cuadro de texto con el siguiente filtro:
resource.type="k8s_cluster" logName="projects/PROJECT_ID/logs/externalaudit.googleapis.com%2Factivity" protoPayload.serviceName="anthosgke.googleapis.com"
Haz clic en Enviar filtro a fin de mostrar todos los registros de auditoría de los clústeres de GKE on VMware que se configuraron para acceder a este proyecto.
gcloud
Enumera las dos primeras entradas en el registro de actividad de administrador de tu proyecto que se aplican al tipo de recurso k8s_cluster
:
gcloud logging read \ 'logName="projects/PROJECT_ID/logs/externalaudit.googleapis.com%2Factivity" \ AND resource.type="k8s_cluster" \ AND protoPayload.serviceName="anthosgke.googleapis.com" ' \ --limit 2 \ --freshness 300d
En el ejemplo anterior, PROJECT_ID es el ID del proyecto.
Los resultados muestran dos entradas de registro. Ten en cuenta que para cada entrada de registro, el campo logName
tiene el valor projects/PROJECT_ID/logs/externalaudit.googleapis.com%2Factivity
, y protoPayload.serviceName
es igual a anthosgke.googleapis.com
.
Política de auditoría
El comportamiento de los registros de auditoría de Cloud se determina mediante una política de registro de auditoría de Kubernetes configurada de manera estática. Por el momento, no se admite el cambio de esta política, pero estará disponible en una versión futura.