Regionalizar seus registros

Neste documento, descrevemos como usar o coletor _Default para rotear seu registro. entradas em um bucket do Cloud Logging que está em uma região específica. Para acessar uma lista de regiões compatíveis, consulte Locais.

Você também pode definir um local de armazenamento padrão para os novos _Default e _Required por buckets, definindo as configurações padrão para sua organização ou pasta. Para mais informações, consulte Definir o local de armazenamento padrão.

Neste guia, percorremos esse processo usando o exemplo de redirecionamento de todos os registros para a região europe-west1. Esse processo envolve as seguintes etapas:

1. Criar um bucket de registro na região designada para armazenar os registros.

2. Redirecionar o coletor _Default para rotear os registros para o novo bucket de registro.

3. Pesquisar registros no Explorador de registros.

4. (Opcional) Atualizar o período de armazenamento de registros.

Visão geral

No Logging, os buckets de registros são recursos regionais: a infraestrutura que armazena, indexa e pesquisa seus registros está localizada em uma localização geográfica específica. Google Cloud gerencia a infraestrutura para que seus aplicativos fiquem disponíveis de modo redundante nas zonas da região.

Talvez sua organização precise armazenar os dados de registros em regiões específicas. Os principais fatores para selecionar a região em que seus registros são armazenados incluem atender aos requisitos de latência, disponibilidade ou conformidade de sua organização. Ao selecionar uma região para armazenamento de registros, considere os locais dos outros produtos e serviços do Google Cloud usados pelo aplicativo.

Principais conceitos

Os principais conceitos a seguir se aplicam à regionalidade de dados do Logging.

Locais do roteador de registros

O Log Router processa todas as entradas de registro gravadas na API Cloud Logging. Ele verifica cada entrada de registro em relação às regras atuais para determinar quais entradas de registro armazenar em buckets do Logging e quais entradas de registro rotear para destinos suportados usando coletores. Para rotear os registros de maneira confiável, o O roteador de registros também armazena os registros temporariamente, o que mantém interrupções em qualquer coletor.

O Log Router processa os registros na região em que são recebidos. O roteador de registros pode enviar registros para uma região diferente com base ou se tiver optado por compartilhar dados de registro com outra serviço do Google Cloud, como o Detecção de ameaças do Security Command Center. Os coletores se aplicam aos registros igualmente e independentemente da região.

Locais dos buckets de registros

Buckets de registros são os contêineres projeto do Google Cloud, conta de faturamento, pasta e organização que armazenam e organizar os dados de registros.

Para cada projeto do Google Cloud, conta de faturamento, pasta e organização, O Logging cria automaticamente dois buckets de registros: _Required e _Default, que estão no local global. Não é possível alterar o local dos buckets atuais. No entanto, sua organização pode criar uma política que define um local padrão diferente para esses buckets. Para mais informações, ver Definir as configurações padrão para organizações e pastas.

Também é possível criar buckets de registros definidos pelo usuário para projeto do Google Cloud. Ao criar um bucket de registros definido pelo usuário, especifique o local do bucket de registros. Depois de criar o bucket de registros, local não pode ser alterado, mas é possível criar um novo bucket e direcionar de registros para o novo bucket de registros com coletores. Para saber como definir o local dos buckets, consulte Regionalizar os registros.

O Logging oferece suporte à consulta de registros de várias regiões juntas, em quais casos as consultas são processadas nos mesmos locais que os buckets consultadas e agregadas na região de onde a consulta foi recebida para retornar os resultados.

Antes de começar

Para concluir as etapas deste guia, você precisa saber o seguinte:

• Em qual projeto do Google Cloud você quer armazenar os registros? Neste guia, use um projeto do Google Cloud chamado logs-test-project.

• Qual é o nome e o local do bucket de registro em que você quer armazenar os registros? Neste guia, o nome do bucket é region-1-logs-bucket e o local é europe-west1.

• Quais registros você quer incluir? Neste guia, incluímos todos os registros roteados pelo coletor _Default.

Regiões compatíveis

Ao criar o bucket de registros, é possível escolher onde armazenar os registros. Para uma lista de regiões compatíveis, consulte Locais.

Criar o bucket de registros

Observação:o Error Reporting é uma serviço global criado no Cloud Logging e não analisa registros armazenados em buckets de registros regionais, registros que são roteados para outros projetos ou registros armazenados em buckets de registros que usam chaves de criptografia gerenciadas pelo cliente.

Os buckets de registros armazenam os registros roteados de outras pastas, organizações ou projetos do Google Cloud. Para mais informações, consulte Configure buckets de registros.

Para criar o bucket no projeto do Google Cloud em que os registros serão armazenados siga estas etapas:

1. Acesse o Console do Google Cloud:

   Acessar o Console do Google Cloud

2. Em um terminal, execute o seguinte comando para criar um bucket, substituindo as partes em negrito pelas suas informações:

    gcloud logging buckets create region-1-logs-bucket \
      --location=europe-west1 \
      --project=logs-test-project
   

   Observação :depois de criar o bucket, não será possível alterar a região dele.

3. Verifique se o bucket foi criado:

   gcloud logging buckets list --project=logs-test-project
   

Redirecionar o coletor de registros _Default

Você encaminha registros para um bucket de registros criando um coletor. Um coletor inclui um filtro, que seleciona quais entradas de registro serão exportadas por meio do coletor, e um destino. Neste guia, atualizamos o coletor _Default atual para rotear registros para nosso bucket, region-1-logs-bucket.

Observação: o redirecionamento do coletor _Default garante que todos os registros futuros sejam incluídos no bucket de registros regionalizados, e não no bucket _Default, que é global. Não é possível alterar o coletor _Required, com os registros entrando em um bucket global diferente.

Para atualizar o coletor, execute o seguinte comando, substituindo as partes em negrito por suas próprias informações:

gcloud logging sinks update _Default \
  logging.googleapis.com/projects/logs-test-project/locations/europe-west1/buckets/region-1-logs-bucket \
  --log-filter='NOT LOG_ID("cloudaudit.googleapis.com/activity") AND NOT
    LOG_ID("externalaudit.googleapis.com/activity") AND NOT
    LOG_ID("cloudaudit.googleapis.com/system_event") AND NOT
    LOG_ID("externalaudit.googleapis.com/system_event") AND NOT
    LOG_ID("cloudaudit.googleapis.com/access_transparency") AND NOT
    LOG_ID("externalaudit.googleapis.com/access_transparency")' \
  --description="Updated the _Default sink to route logs to the europe-west1 region"

Observação :o log-filter mostrado no comando é o filtro padrão das Coletor _Default. O coletor _Required roteia esses registros, para que o coletor _Default encaminha todos os outros registros além desses para evitar sobreposição.

Criar uma entrada de registro para testar o coletor

Para verificar se você atualizou o coletor corretamente, siga estas etapas:

1. Envie uma mensagem de registro de teste para o bucket regionalizado usando o comando gcloud logging write e, em seguida, aguarde alguns minutos. Exemplo:

   gcloud logging write TEST_LOG_NAME "Test to route logs to region-1-logs-bucket" --project=logs-test-project
   

   Observação :o envio da mensagem de teste pode levar vários minutos.

2. No console do Google Cloud, acesse a página Análise de registros:

   Acessar a Análise de registros

   Se você usar a barra de pesquisa para encontrar essa página, selecione o resultado com o subtítulo Logging.

3. No painel Campo de registro, selecione o tipo de recurso Global.

4. A entrada de registro de teste é exibida no painel Resultados da consulta.

Pesquisar registros no console do Google Cloud

Após definir as permissões na seção anterior, acesse Console do Google Cloud e conclua as etapas a seguir:

1. No console do Google Cloud, acesse a página Análise de registros:

   Acessar a Análise de registros

   Se você usar a barra de pesquisa para encontrar essa página, selecione o resultado com o subtítulo Logging.

2. Selecione Refinar escopo.

3. No painel Refinar escopo, selecione Escopo por armazenamento.

4. Selecione region-1-logs-bucket.

5. Clique em Aplicar.

6. O Explorador de registros é atualizado para mostrar registros do bucket.

   Para mais informações sobre o uso, consulte Como usar o Explorador de registros.

[Opcional] Como atualizar o período de armazenamento de registros do bucket

Para alterar o período de armazenamento dos registros no bucket, execute o seguinte comando:

gcloud logging buckets update region-1-logs-bucket \
  --location=europe-west1 --project=logs-test-project \
  --retention-days=14

Próximas etapas

• Veja todos os serviços do Google Cloud disponíveis em locais do mundo todo.

• Conheça outros conceitos relacionados a locais, como zonas, que são relevantes para outros serviços do Google Cloud.

• Leia os seguintes artigos que oferecem práticas recomendadas para governança de dados:

  • Dados de registros: um guia passo a passo para superar desafios comuns de conformidade

  • Governança de dados: princípios para proteger e gerenciar registros