Monitorar métricas do Dataplex

O Cloud Monitoring fornece visibilidade para o desempenho, o tempo de atividade e a integridade geral de aplicativos com tecnologia de nuvem. A observabilidade do Google Cloud coleta e ingere métricas, eventos e metadados dos serviços do Dataplex para gerar insights por meio de painéis e gráficos.

Acessar métricas de serviço no Monitoring

As métricas de recursos de serviço do Dataplex são ativadas automaticamente nos serviços do Dataplex. Use o Monitoring para ver essas métricas.

Acesse o Monitoring no console do Google Cloud ou usando a API Monitoring.

Console

  1. No console do Google Cloud, acesse a página Cloud Monitoring > Metrics Explorer:

    Acessar a página "Metrics Explorer"

  2. Na lista suspensa "Find resource type and metric", selecione um recurso Cloud Dataplex.

  3. Clique novamente na caixa de entrada e selecione uma métrica na lista suspensa. Passe o cursor do mouse sobre o nome da métrica para ver informações sobre ela.

Você pode selecionar filtros, agrupar por marcadores de métricas, executar agregações e selecionar opções de exibição de gráficos.

REST

Você pode usar a API timeSeries.list do Monitoring para capturar e listar métricas definidas por uma expressão filter. Use o modelo Try this API na página da API para enviar uma solicitação de API e exibir a resposta.

Métricas de serviço do Dataplex no Monitoring

As métricas de serviço do Dataplex facilitam o monitoramento da integridade do serviço.

Escopo Nome da métrica Recurso monitorado Descrição da métrica
Lake requires_action dataplex.googleapis.com/Lake Se o lake tem ações de administrador não resolvidas. 1 se o lake for acionável. Caso contrário, 0.
Zona requires_action dataplex.googleapis.com/Zone Se a zona de dados tem ações de administrador não resolvidas. 1 se a zona de dados for acionável. Caso contrário, 0.
Recurso requires_action dataplex.googleapis.com/Asset Se o recurso tem ações de administrador não resolvidas. 1 se o recurso for acionável. Caso contrário, 0.
Recurso ativo dataplex.googleapis.com/Asset Indica se o recurso está ativo. 1 se um recurso existe em estado sem erro. Caso contrário, 0.
Recurso data_items dataplex.googleapis.com/Asset Número atual de itens de dados descobertos em um recurso (objetos no bucket do Cloud Storage e linhas nos conjuntos de dados do BigQuery).
Recurso data_size dataplex.googleapis.com/Asset Tamanho total dos dados em um recurso (informado em bytes).
Recurso conjuntos de arquivos dataplex.googleapis.com/asset Número atual de conjuntos de arquivos descobertos em um recurso.
Recurso tabelas dataplex.googleapis.com/Asset Número atual de tabelas descobertas em um recurso.

Criar um painel personalizado do Monitoring

É possível criar um painel personalizado do Monitoring que exibe gráficos de métricas de serviço selecionadas do Dataplex.

  1. Selecione + CREATE DASHBOARD na página Dashboards Overview do Monitoring. Forneça um nome para o painel e clique em Add Chart no menu superior direito para abrir a janela Add Chart. Selecione um recurso Cloud Dataplex como o tipo. Selecione uma ou mais métricas e propriedades para métricas e gráficos. Em seguida, salve o gráfico.

  2. É possível adicionar gráficos ao seu painel. Depois que você salvar o painel, seu título aparecerá na página Dashboards Overview do Monitoring. Os gráficos do painel podem ser exibidos, atualizados e excluídos a partir da página de exibição do painel.

Usar alertas do Monitoring

É possível criar um alerta do Monitoring que notifica quando um serviço ou uma métrica de job do Dataplex ultrapassa um limite especificado.

Crie um alerta

  1. No console do Google Cloud, abra Alertas do Monitoring. Clique em + CREATE POLICY para abrir o formulário Create new alerting policy. Para definir um alerta, adicione condições de alerta, acionadores de política, canais de notificação e documentação.

  2. Selecione ADD CONDITION para abrir o formulário de condição de alerta com a guia "Metric" selecionada. Preencha os campos para definir uma condição de alerta e clique em ADD.

  3. Depois de adicionar a condição de alerta, preencha a política de alerta configurando canais de notificação, acionadores de política, documentação e o nome da política de alerta.

Ver alertas

Quando um alerta é acionado por uma condição de limite de métrica, o Monitoring cria um incidente e um evento correspondente. É possível ver os incidentes na página Alertas do Monitoring no console do Google Cloud. O Monitoring também envia uma notificação do incidente se tiver sido definido na política de alerta algum mecanismo de notificação, como notificações por e-mail ou por SMS.

A seguir