Usar claves de encriptación administradas por el cliente

En esta página, se explica cómo usar las claves de encriptación administradas por el cliente (CMEK) para proteger los servicios de Dataproc Metastore. CMEK proporciona encriptación de datos en reposo con una clave que puedes controlar mediante Cloud Key Management Service. Puedes almacenar las claves como claves de software, en un clúster de HSM o de manera externa.

Antes de comenzar

Si quieres que tu servicio se ejecute dentro de un perímetro de Controles del servicio de VPC, debes agregar la API de Cloud Key Management Service (Cloud KMS) al perímetro.

Configura la compatibilidad con CMEK para Dataproc Metastore

A fin de configurar la compatibilidad con CMEK para Dataproc Metastore, primero debes otorgar permiso de clave de Cloud KMS a las cuentas de servicio de Dataproc Metastore y Cloud Storage. Luego, puedes crear un servicio de Dataproc Metastore que use una clave CMEK.

Otorga permisos de clave de Cloud KMS

Use los siguientes comandos para otorgar permisos de clave de Cloud KMS a Dataproc Metastore:

gcloud

  1. Crea una clave CMEK en Cloud KMS (si aún no hay una disponible). El siguiente comando es un ejemplo de cómo crear una clave de software:

    gcloud config set project PROJECT_ID
    gcloud kms keyrings create KEY_RING \
      --project KEY_PROJECT \
      --location=LOCATION
    gcloud kms keys create KEY_NAME \
      --project KEY_PROJECT \
      --location=LOCATION \
      --keyring=KEY_RING \
      --purpose=encryption
    

    Del mismo modo, puedes crear una clave de HSM o crear una clave de EKM.

  2. Otorga permisos a la cuenta de servicio del agente de servicio de Dataproc Metastore:

    gcloud kms keys add-iam-policy-binding KEY_NAME \
      --location LOCATION \
      --keyring KEY_RING \
      --member=serviceAccount:$(gcloud beta services identity create \
      --service=metastore.googleapis.com 2>&1 | awk '{print $4}') \
      --role=roles/cloudkms.cryptoKeyEncrypterDecrypter
    
  3. Otorga permisos a la cuenta de servicio de Cloud Storage:

    gsutil kms authorize -k projects/KEY_PROJECT/locations/LOCATION/keyRings/KEY_RING/cryptoKeys/KEY_NAME
    

Crea un servicio de Dataproc Metastore con una clave CMEK

Sigue estos pasos para configurar la encriptación de CMEK durante la creación del servicio:

Console

  1. En Google Cloud Console, abre la página Dataproc Metastore:

    Abre Dataproc Metastore en Google Cloud Console

  2. En la parte superior de la página Dataproc Metastore haz clic en el botón Crear. Se abrirá la página Crear servicio.

  3. Configura tu servicio como desees.

  4. En Encriptación, haz clic en Usar una clave de encriptación administrada por el cliente (CMEK).

  5. Selecciona la clave administrada por el cliente.

  6. Haga clic en Enviar.

Verifica la configuración de encriptación del servicio:

  1. En Google Cloud Console, abre la página Dataproc Metastore:

    Abre Dataproc Metastore en Google Cloud Console

  2. En la página Dataproc Metastore, haz clic en el nombre del servicio que quieres ver. Se abrirá la página Detalles del servicio de ese servicio.

  3. En la pestaña Configuración, verifica que los detalles muestren CMEK como habilitado.

gcloud

  1. Ejecuta el siguiente comando de gcloud metastore services create para crear un servicio con encriptación de CMEK:

    gcloud metastore services create SERVICE \
       --encryption-kms-key=KMS_KEY
    

    Reemplaza lo siguiente:

    • SERVICE: Nombre del servicio nuevo.
    • KMS_KEY: Se refiere al ID de recurso de la clave.
  2. Verifica que la creación se haya realizado correctamente.

Datos de Dataproc Metastore protegidos con claves de encriptación proporcionadas por Google

La base de datos de Cloud Monitoring no es compatible con la encriptación de CMEK. En cambio, Google Cloud usa claves de encriptación de Google para proteger los nombres y la configuración de los servicios de Dataproc Metastore.

Importar y exportar datos desde y hacia un servicio habilitado para CMEK

Si deseas que tus datos permanezcan encriptados con una clave administrada por el cliente durante una importación, debes configurar CMEK en el bucket de Cloud Storage antes de importar datos desde ellos.

Puedes importar desde un bucket de Cloud Storage que no esté protegido con CMEK. Después de la importación, los datos almacenados en Dataproc Metastore se protegen según la configuración CMEK del servicio de destino.

Cuando se exporta, el volcado de la base de datos exportado está protegido según la configuración de CMEK del bucket de almacenamiento de destino.

Advertencias de CMEK para Dataproc Metastore

  • Si se inhabilita o se borra la CMEK para un servicio habilitado con CMEK, no se puede usar y no se puede recuperar.

    • Los datos se pierden de forma permanente.
  • No puedes habilitar las claves de encriptación administradas por el cliente en un servicio existente.

  • No puedes rotar la clave que usa un servicio habilitado para CMEK.

  • Un servicio habilitado para CMEK no admite la sincronización de Data Catalog. Falla la actualización de un servicio habilitado con CMEK para habilitar la sincronización de Data Catalog. Además, no puede crear un servicio nuevo con ambas funciones habilitadas.

  • No puedes usar claves de encriptación administradas por el cliente para encriptar datos del usuario en tránsito, como consultas de usuario y las respuestas obtenidas.

  • Cuando usas una clave de Cloud EKM, Google no tiene control sobre la disponibilidad de tu clave administrada de forma externa. Si la clave deja de estar disponible durante el período de creación del servicio de Dataproc Metastore, fallará la creación del servicio. Después de crear un servicio de Dataproc Metastore correctamente, si la clave deja de estar disponible, el servicio dejará de estar disponible hasta que la clave esté disponible. Para obtener más consideraciones cuando usas claves externas, consulta Consideraciones de Cloud EKM.

¿Qué sigue?