En esta guía, se explica cómo supervisar las instancias y canalizaciones de Cloud Data Fusion. Puedes ver las métricas clave en el panel de supervisión de Cloud Data Fusion. Para obtener más información sobre la agregación o el filtrado, puedes ver las métricas en Cloud Monitoring.
Antes de comenzar
Antes de comenzar a supervisar las instancias y canalizaciones de Cloud Data Fusion, revisa los precios y otorga los roles necesarios.
Precios
El uso de Cloud Monitoring genera cargos. Para obtener más información, consulta los precios de Google Cloud Observability.
Roles requeridos
Para obtener los permisos que necesitas para ver las métricas, pídele a tu administrador que te otorgue el rol de IAM de Visualizador de Monitoring (roles/monitoring.viewer) en tu proyecto.
Para obtener más información sobre cómo otorgar roles, consulta Administra el acceso a proyectos, carpetas y organizaciones.
También puedes obtener los permisos necesarios a través de roles personalizados o cualquier otro rol predefinido.
Supervisa en Cloud Data Fusion
Consulta y filtra las métricas de tus instancias y canalizaciones directamente en Cloud Data Fusion con el panel de supervisión:
En la consola de Google Cloud , ve a la página de Cloud Data Fusion.
Haz clic en Instancias y, luego, en el nombre de la instancia para ir a la página Detalles de la instancia.
Haz clic en la pestaña Monitoring. Se mostrará un panel con gráficos para tu instancia y sus canalizaciones.
En el panel, se muestran las siguientes vistas:
- Descripción general: Supervisa las métricas del sistema de Cloud Data Fusion.
- Instancia: Supervisa todas las instancias de Cloud Data Fusion en el proyecto.
- Canalización: Proporciona información sobre las ejecuciones y el rendimiento de la canalización.
Para obtener información detallada sobre las métricas en cualquier vista, coloca el cursor sobre el widget y haz clic en Más > Ver en el Explorador de métricas.
Widgets en el panel de supervisión
En las siguientes secciones, se describen los widgets disponibles en las vistas Overview, Instance y Pipeline.
Widgets de la vista de descripción general
En esta tabla, se describen los widgets de la vista Overview:
| Widget | Descripción |
|---|---|
| Estado del servicio de AppFabric | Disponibilidad del servicio de AppFabric |
| Estado del servicio de métricas | Disponibilidad del servicio para las métricas |
| Estado del servicio de Wrangler | Disponibilidad del servicio de Wrangler |
| Estado del ejecutor del conjunto de datos | Disponibilidad del servicio para el conjunto de datos |
| Estado de Pipeline Studio | Disponibilidad del servicio de Pipeline Studio |
| Estado del servicio de entorno de ejecución | Disponibilidad del servicio para el tiempo de ejecución |
| Estado del servicio de Log Saver | Disponibilidad del servicio de Log Saver |
| Estado del servicio de metadatos | Disponibilidad del servicio para los metadatos |
Widgets de la vista de canalización
En esta tabla, se describen los widgets de la vista Pipeline:
| Widget | Descripción |
|---|---|
| Ejecuciones de canalizaciones exitosas | Es el recuento acumulativo de ejecuciones de canalizaciones exitosas. |
| Ejecuciones fallidas de canalizaciones | Es el recuento acumulativo de las ejecuciones de canalización con errores. |
| Ejecuciones de canalizaciones anuladas | Es el recuento acumulativo de las ejecuciones de canalizaciones anuladas. |
| Ejecuciones de canalizaciones rechazadas | Es el recuento acumulativo de las ejecuciones de canalizaciones rechazadas. |
| Tiempo de ejecución de la canalización iniciada correctamente | Es el tiempo que tardan en completarse las ejecuciones de canalizaciones exitosas. |
| Latencia de inicio de la canalización | Es el tiempo que tarda una ejecución de canalización en alcanzar el estado "En ejecución". |
| Latencia de aprovisionamiento de Dataproc | Es el tiempo que se tarda en aprovisionar el clúster de Dataproc. |
| Recuento de solicitudes a la API de Dataproc | Es el recuento acumulativo de las solicitudes a la API de Dataproc. |
| Tiempo de ejecución de la vista previa iniciada correctamente | Es el tiempo que tardan en completarse las ejecuciones de vista previa correctas. |
| Ejecuciones de vista previa | Es la cantidad de ejecuciones de vista previa. |
| Bytes de canalización leídos | Es el recuento acumulativo de bytes que lee una canalización. |
| Bytes de canalización escritos | Es el recuento acumulativo de bytes escritos por una canalización. |
| Bytes de canalización redistribuidos | Es el recuento acumulativo de bytes que se mezclaron en una canalización. |
| Registros de complementos procesados entrantes | Es el recuento acumulativo de registros que ingresan a un complemento. |
| Registros de complementos procesados salientes | Es el recuento acumulativo de registros que salen de un complemento. |
Widgets de vista de instancia
En esta tabla, se describen los widgets de la vista Instancia:
| Widget | Descripción |
|---|---|
| Canalizaciones simultáneas en ejecución | Cantidad de canalizaciones que se ejecutan de forma simultánea. |
| Se lanzaron canalizaciones simultáneas | Cantidad de canalizaciones en estado de aprovisionamiento o inicio. |
| Solicitudes a la API recibidas | Es el recuento acumulativo de las solicitudes a la API recibidas. |
| Recuento de respuestas de la API | Es el recuento acumulativo de las respuestas de la API enviadas. |
| Recuento de verificaciones de autorización | Es el recuento acumulativo de las verificaciones de autorización. |
| Hora de verificación de la autorización | Es la latencia de las verificaciones de autorización. |
| Recuento de canalizaciones implementadas | Es la cantidad de canalizaciones implementadas. |
| Recuento de canalizaciones en borrador | Es la cantidad de canalizaciones en borrador. |
| Cantidad de espacios de nombres | Cantidad de espacios de nombres. |
Visualiza métricas para el análisis avanzado en Cloud Monitoring
Para ver opciones adicionales de filtrado y agregación, consulta tus métricas en Cloud Monitoring:
En la consola de Google Cloud , ve a la página Explorador de métricas de Cloud Monitoring.
Selecciona el recurso supervisado de Cloud Data Fusion.
Elige una métrica.
Selecciona filtros y agregaciones.
¿Qué sigue?
- Para obtener información sobre los filtros y las métricas, consulta la descripción general de las métricas de Cloud Data Fusion.