Escribe y consulta entradas de registro con una secuencia de comandos de Python

En esta guía de inicio rápido, se presentan algunas de las funciones de Cloud Logging y te muestra cómo hacer lo siguiente:

  • Escribir entradas de registro con una secuencia de comandos de Python
  • Consulta las entradas de registro con una secuencia de comandos de Python.
  • Borra entradas de registro con una secuencia de comandos de Python.
  • Enruta los registros a un bucket de Cloud Storage.

Logging puede enrutar entradas de registro a los siguientes destinos:

  • Buckets de Cloud Storage
  • Conjuntos de datos de BigQuery
  • Pub/Sub
  • Buckets de Logging
  • Proyectos de Google Cloud

Antes de comenzar

Debes tener un proyecto de Google Cloud con la facturación habilitada para completar esta guía de inicio rápido. Si no tienes un proyecto de Google Cloud o no tienes la facturación habilitada para tu proyecto de Google Cloud, sigue estos pasos:
  1. Sign in to your Google Cloud account. If you're new to Google Cloud, create an account to evaluate how our products perform in real-world scenarios. New customers also get $300 in free credits to run, test, and deploy workloads.

  2. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Go to project selector

  3. Make sure that billing is enabled for your Google Cloud project.

  4. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Go to project selector

  5. Make sure that billing is enabled for your Google Cloud project.

En esta guía de inicio rápido, se usa Cloud Logging y Cloud Storage. El uso de estos recursos puede generar gastos. Cuando finalices esta guía de inicio rápido, puedes borrar los recursos que creaste para evitar que continúe la facturación. Consulta Realiza una limpieza en esta página para obtener más detalles.

Comenzar

Puedes usar el entorno de Cloud Shell o un entorno genérico de Linux para completa esta guía de inicio rápido. Python está preinstalado en Cloud Shell.

Cloud Shell

  1. Abre Cloud Shell y verifica tu proyecto de Google Cloud actual:

    1. En la consola de Google Cloud, haz clic en Activar Cloud Shell.

      Se abre Cloud Shell en una ventana y muestra una bienvenida mensaje.

    2. El mensaje de bienvenida repite el ID del proyecto de Google Cloud configurado. Si este no es el caso proyecto de Google Cloud que quieres usar, ejecuta el siguiente comando después de y reemplaza PROJECT_ID por el ID de tu proyecto:

      gcloud config set project PROJECT_ID

Linux

  1. Asegúrate de que Python esté instalado y configurado. Para obtener información sobre cómo preparar tu máquina para el desarrollo con Python, consulta Configura un entorno de desarrollo de Python.

  2. Instala la biblioteca cliente de Cloud Logging:

    pip install --upgrade google-cloud-logging

  3. Configura los permisos de Identity and Access Management para tu proyecto de Google Cloud. En sigue estos pasos, crearás una cuenta de servicio para tu proyecto de Google Cloud y, luego, generarás y descargarás un archivo en tu estación de trabajo de Linux.

    1. En la consola de Google Cloud, ve a la página Cuentas de servicio:

      Ve a Cuentas de servicio.

      Si usas la barra de búsqueda para encontrar esta página, selecciona el resultado cuyo subtítulo es IAM y administrador.

    2. Selecciona el proyecto de la guía de inicio rápido de Google Cloud y, luego, haz clic en Crea una cuenta de servicio:

      • Ingresa el nombre de la cuenta.
      • Ingresa una descripción de la cuenta.
      • Haz clic en Crear y continuar.

    3. Haz clic en el campo Seleccionar una función y selecciona Administrador de registros.

    4. Haz clic en Listo para terminar de crear la cuenta de servicio.

    5. Crea un archivo de claves y descárgalo en tu estación de trabajo:

      • En tu cuenta de servicio, haz clic en Más opciones y selecciona Administrar claves.
      • En el panel Claves, haz clic en Agregar clave.
      • Haz clic en Crear clave nueva.

      • Para el tipo de clave, selecciona JSON y haz clic en Crear. Después de un momento, aparecerá una ventana con un mensaje similar por lo siguiente:

        Se guardó la clave privada y se guardó en tu computadora.

  4. En tu estación de trabajo Linux, proporciona credenciales de autenticación a tu aplicación configurando la variable de entorno GOOGLE_APPLICATION_CREDENTIALS con la ruta hacia tu archivo de claves. Por ejemplo:

     export GOOGLE_APPLICATION_CREDENTIALS="/home/user/Downloads/FILE_NAME.json"

    Esta variable de entorno solo se aplica a la sesión actual del shell. Por lo tanto, si abres una sesión nueva, deberás volver a configurar la variable.

Clona la fuente

Si deseas configurar Cloud Shell para esta guía de inicio rápido, haz lo siguiente:

  1. Clona el proyecto python-logging de GitHub:

      git clone https://github.com/googleapis/python-logging

    El directorio samples/snippets contiene las dos secuencia de comandos que se usan en esta guía de inicio rápido:

    • snippets.py te permite administrar entradas en un registro.
    • export.py te permite administrar las exportaciones de registros.

  2. Cambia al directorio snippets:

      cd python-logging/samples/snippets

Escribe entradas de registro

La secuencia de comandos snippets.py usa las bibliotecas cliente de Python para escribir entradas de registro en Logging. Cuando se especifica la opción write en la línea de comandos, la secuencia de comandos escribe las siguientes entradas de registro:

  • Una entrada con datos no estructurados y sin nivel de gravedad especificado
  • Una entrada con datos no estructurados y un nivel de gravedad de ERROR
  • Una entrada con datos estructurados JSON y sin nivel de gravedad especificado

Para escribir entradas de registro nuevas en el registro my-log, ejecuta la secuencia de comandos snippets.py con la opción write:

python snippets.py my-log write

Visualiza entradas de registro

Para ver las entradas de registro en Cloud Shell, ejecuta la secuencia de comandos snippets.py con la opción list:

python snippets.py my-log list

El comando se completa con el resultado:

    Listing entries for logger my-log:
    * 2018-11-15T16:05:35.548471+00:00: Hello, world!
    * 2018-11-15T16:05:35.647190+00:00: Goodbye, world!
    * 2018-11-15T16:05:35.726315+00:00: {u'favorite_color': u'Blue', u'quest': u'Find the Holy Grail', u'name': u'King Arthur'}

Si el resultado no muestra ninguna entrada, vuelve a ejecutar el comando. Lleva unos minutos momentos para que Logging reciba y procese entradas de registro.

Para ver tus entradas de registro, también puedes usar el Explorador de registros. Para ver más consulta Visualiza registros con el Explorador de registros.

Borra entradas de registro

Para borrar todas las entradas del registro my-log, ejecuta la secuencia de comandos snippets.py con la opción delete:

python snippets.py my-log delete

El comando se completa con el resultado:

Deleted all logging entries for my-log

Registros de ruta

En esta sección, harás lo siguiente:

  • Crear un bucket de Cloud Storage como destino para tus datos
  • Crear un receptor que copie nuevas entradas de registro en el destino
  • Actualizar los permisos de tu bucket de Cloud Storage
  • Escribir entradas de registro en Logging
  • De forma opcional, verificar el contenido de tu bucket de Cloud Storage.

Crea un destino

El destino de exportación de esta guía de inicio rápido es un bucket de Cloud Storage. Para crear un bucket de Cloud Storage, haz lo siguiente:

  1. En la consola de Google Cloud, ve a la página Buckets:

    Ir a Buckets

    Si usas la barra de búsqueda para encontrar esta página, selecciona el resultado cuyo subtítulo sea Cloud Storage.

  2. Haz clic en Crear bucket.
  3. Ingresa un nombre para tu bucket.
  4. En Tipo de ubicación, selecciona Región, que elige una ubicación de bucket con el la latencia más baja.
  5. En Clase de almacenamiento predeterminada, selecciona Estándar.
  6. En Control de acceso, selecciona Detallado.
  7. En Herramientas de protección, selecciona Ninguna y, luego, haz clic en Crear.

En esta guía de inicio rápido, se usa un nombre de bucket myloggingproject-1 de Cloud Storage.

Crear un receptor

Un receptor es una regla que determina si Logging enruta una entrada de registros recién llegada a un destino. Un receptor tiene tres atributos:

  • Nombre
  • Destino
  • Filtro

Para obtener más información sobre los receptores, consulta Receptores.

Si una entrada de registro nueva cumple con las condiciones de consulta, esa entrada se enruta al destino.

La secuencia de comandos export.py usa las bibliotecas cliente de Python para crear, enumerar, modificar y borrar receptores. Para crear el receptor mysink, que exporta todas las entradas de registro con una gravedad de INFO como mínimo al bucket myloggingproject-1 de Cloud Storage, ejecuta el siguiente comando:

python export.py create mysink myloggingproject-1 "severity>=INFO"

Para ver tus receptores, ejecuta la secuencia de comandos export.py con la opción list:

python export.py list

La secuencia de comandos muestra lo siguiente:

    mysink: severity>=INFO -> storage.googleapis.com/myloggingproject-1

Actualiza los permisos de destino

Los permisos del destino, en este caso, Cloud Storage no se modifican cuando creas un receptor con la secuencia de comandos export.py. Debes cambiar la configuración de permiso de tu bucket de Cloud Storage para otorgar permiso de escritura al receptor. Para obtener información sobre las cuentas de servicio, los permisos de acceso y las funciones de la administración de identidades y accesos, consulta Cuentas de servicio.

Para actualizar los permisos del bucket de Cloud Storage, sigue estos pasos:

  1. Identifica la Identidad del escritor de tu receptor:

    1. En la consola de Google Cloud, ve a la página Enrutador de registros:

      Ir a Enrutador de registros

      Si usas la barra de búsqueda para encontrar esta página, selecciona el resultado cuyo subtítulo es Logging.

      Verás una tabla de resumen de tus sumideros.

    2. Busca tu lavabo en la mesa, selecciona Menú, y, luego, selecciona Ver detalles del receptor.

    3. Copia la identidad del escritor en el portapapeles.

  2. En la consola de Google Cloud, ve a la página Buckets:

    Ir a Buckets

    Si usas la barra de búsqueda para encontrar esta página, selecciona el resultado cuyo subtítulo es Cloud Storage.

  3. Para abrir la vista detallada, haz clic en el nombre de tu bucket.

  4. Selecciona Permisos y haz clic en Otorgar acceso.

  5. Pega la identidad del escritor en el cuadro Principales nuevas. Quita el serviceAccount: de la dirección de identidad del escritor.

  6. Establece la Función en Storage Object Creator y, luego, haz clic en Guardar.

Para obtener más información, consulta Configura permisos de destino.

Valida el receptor

Para validar que el receptor y el destino estén configurados de forma correcta, haz lo siguiente:

  1. Escribe entradas de registro nuevas en el registro my-log:

    python snippets.py my-log write

  2. Visualiza el contenido de tu bucket de Cloud Storage:

    1. En la consola de Google Cloud, ve a la página Buckets:

      Ir a Buckets

      Si usas la barra de búsqueda para encontrar esta página, selecciona el resultado cuyo subtítulo sea Cloud Storage.

    2. Para abrir la vista detallada, haz clic en el nombre de tu bucket. La vista de detalles muestra una lista de las carpetas que contienen datos. Si tu bucket no contiene datos, aparecerá el siguiente mensaje:

      There are no live objects in this bucket.

      Como se describe en Entradas de registro tardías, pueden pasar 2 o 3 horas antes de que aparezcan las primeras entradas en la destino o antes de que se te notifique un error de configuración.

      Una vez que el bucket recibió los datos, en la vista de detalles, se muestra un resultado similar al siguiente:

      Vista detallada del contenido del bucket.

    3. Los datos en cada carpeta están organizados en una serie de carpetas etiquetadas. La carpeta de nivel superior consiste en un nombre de registro y, sucesivamente, el año, el mes y el día. Para ver los datos que exportó tu receptor, haz clic en el nombre de la carpeta my-log y, luego, haz clic en las subcarpetas de año, mes y día hasta que llegues a un archivo que termine en json:

      Vista de la subcarpeta del contenido del bucket

    4. El archivo JSON contiene las entradas de registro que se exportaron a tu bucket de Cloud Storage. Haz clic en el nombre del archivo JSON para ver su contenido. Los contenidos son similares a:

       {"insertId":"yf1cshfoivz48",
 "logName":"projects/loggingproject-222616/logs/my-log",
 "receiveTimestamp":"2018-11-15T23:06:14.738729911Z",
 "resource":{"labels":{"project_id":"loggingproject-222616"},"type":"global"},
 "severity":"ERROR",
 "textPayload":"Goodbye, world!",
 "timestamp":"2018-11-15T23:06:14.738729911Z"}

      Debido a que el nivel de gravedad de ERROR es mayor que el de INFO, la entrada de registro que contiene la string “Goodbye, world!” se exporta al destino del receptor. Las otras entradas de registro que se escribieron no se exportaron al destino, porque el nivel de gravedad se estableció en el valor predeterminado, que es menor que INFO.

Soluciona problemas

Existen diferentes motivos por los que un bucket de Cloud Storage podría estar vacío:

  • El bucket no recibió datos. Es posible que se necesiten entre 2 y 3 horas antes de que aparezcan las primeras entradas en el destino, o antes de que recibas la notificación de un error de configuración. Para obtener más información, consulta Entradas de registro que llegan tarde.

  • Hay un error de configuración. En este caso, recibirás un correo electrónico similar al siguiente asunto:

     [ACTION REQUIRED] Logging export config error in myloggingproject.

    En el contenido del cuerpo del correo electrónico se describe el error de configuración. Por ejemplo, si no actualizas los permisos de destino, el correo electrónico mostrará el siguiente código de error:

     bucket_permission_denied

    Para corregir esta condición en particular, consulta Actualiza los permisos de destino en esta página.

  • No se escribieron entradas de registro después de crear el receptor. El receptor se aplica solamente a las entradas de registro recién llegadas. Para corregir esta situación, escribe nuevas entradas de registro:

     python snippets.py my-log write

Limpia

Sigue estos pasos para evitar que se apliquen cargos a tu cuenta de Google Cloud por los recursos que usaste en esta página.

  1. Borra las entradas de registro que creaste (opcional). Si no las borras, caducarán y se quitarán. Consulta Cuotas y límites.

    Para borrar todas las entradas de registro del registro my-log, ejecuta el siguiente comando:

     python snippets.py my-log delete

  2. Borra el proyecto de Google Cloud o los recursos de la guía de inicio rápido.

    • Para borrar tu proyecto de Google Cloud, desde la en el panel Información del proyecto de la consola de Google Cloud, haz clic Ve a la configuración del proyecto y, luego, haz clic en Cerrar.

    • Para borrar tus recursos de inicio rápido, sigue estos pasos:

      1. Borra tu receptor; para ello, ejecuta el siguiente comando:

        python export.py delete mysink

      2. Borra el bucket de Cloud Storage. Ve a la sección Consola de Google Cloud y haz clic en Almacenamiento > Buckets. Marca la casilla ubicada junto al nombre de tu depósito y haz clic en Borrar.

¿Qué sigue?