O Flow Analyzer analisa os dados dos registros de fluxo de VPC armazenados em um formato de gravação. Os registros contêm campos básicos, que são os campos principais de cada registro, e metadados, que fornecem mais informações. O log registra para de monitoramento de fluxos de tráfego consistem em três componentes principais:
- Informações sobre o recurso
- Tipos de métricas
- Série temporal
Informações sobre o recurso
Os registros incluem os seguintes dados sobre os recursos:
- Detalhes da conexão
- Dados do repórter
- Detalhes do GKE
- Detalhes da instância
- Detalhes geográficos
- Detalhes da VPC
Tipos de métricas
Os registros incluem dados dos seguintes tipos de métricas:
- Bytes enviados: contém informações sobre os volumes de payload e não inclui cabeçalhos. O valor dessa métrica pode ser zero porque alguns pacotes têm apenas cabeçalhos e não incluem payloads.
- Pacotes enviados:indica o número de pacotes enviados da origem. até o destino.
Dados brutos de séries temporais
A quantidade de dados brutos de métricas em uma única série temporal pode ser enorme, e geralmente há muitas séries temporais associadas a um tipo de métrica. Para analisar conjunto completo de dados em busca de semelhanças, tendências ou outliers, algum processamento deve ser feito na série temporal no conjunto. Caso contrário, haverá muitos dados para considerar.
Para introduzir a amostragem e a agregação dos exemplos desta página, use uma número de série temporal hipotéticas. Por exemplo, o diagrama a seguir mostra alguns minutos de dados brutos para o tipo de métrica de bytes por segundo:
Antes de analisar, os dados brutos de séries temporais precisam ser manipulados e a análise geralmente envolve a amostragem dos dados e a agregação de alguns. Isso descreve duas técnicas principais para refinar dados brutos:
- Amostragem, que remove alguns dados da consideração. O Google Cloud faz a amostragem e usa os dados necessários do registro para executar operações conforme indicado nas consultas.
- Agregação, que combina vários dados em um com as dimensões que você especificar.
A amostragem e a agregação são ferramentas poderosas para ajudar a identificar e destacar tendências ou outliers nos dados, entre outras coisas.
Como entender o período de alinhamento
A primeira etapa na agregação de dados de série temporal é o alinhamento. Alinhamento cria uma nova série temporal na qual os dados brutos são regularizados no tempo para que e podem ser combinados com outrassérie temporals alinhadas. O alinhamento produz hora com dados regularmente espaçados.
O alinhamento envolve duas etapas:
- Dividir a série temporal em intervalos de tempo regulares, também chamados de agrupamento por classes dos dados. O intervalo é chamado de período de alinhamento.
- Calcular um único valor de métrica para os pontos no período de alinhamento. Você escolhe como esse ponto único é calculado. você pode somar todos os valores, calcular a média ou usar o valor máximo.
O diagrama a seguir mostra como o período de alinhamento é usado para agrupar no horário de início e no horário de término.
O diagrama a seguir mostra o resultado do uso de um período de alinhamento de cinco minutos com as seguintes etapas:
- Criação de um período de alinhamento de cinco minutos.
- Calcular o valor único de uma métrica usando a soma dos valores das métricas dos dados brutos.
Granularidade
Se você souber que algo aconteceu em um intervalo de alguns minutos e quiser se aprofundar, use um período de um minuto para alinhamento dos dados.
Se você estiver interessado em explorar tendências durante períodos mais longos, um maior período de alinhamento pode ser mais apropriado. Grandes períodos de alinhamento são normalmente não é útil para a análise de condições anômalas de curto prazo, como picos curtos no tráfego. Se você usar, por exemplo, um período de alinhamento de várias semanas, o a existência de uma anomalia nesse período ainda pode ser detectada, mas o os dados podem ser muito gerais para serem de muita ajuda.
Para durações maiores, um período de alinhamento menor não é útil. Para exemplo, se você selecionar um alinhamento de 1 minuto para um período de 30 dias, o Flow Analyzer gera mais de 43 mil pontos de dados. Como 43.000 pontos de dados é 10 vezes mais do que os pixels de exibição em 4K, não será possível ver todos os detalhes e algumas opções ficam desativadas por períodos longos.
Opções de alinhamento
As opções de alinhamento incluem somar os valores ou encontrar o máximo, o mínimo ou a média dos valores, encontrar um valor de percentil escolhido, contar os valores e outros. Com o Flow Analyzer, é possível usar várias agregações de métricas como as opções de alinhamento.
Se você selecionar Bytes enviados como o tipo de métrica e Origem e destino como agregação de tráfego, as opções a seguir estão disponíveis.
- Tráfego total
- Taxa de tráfego média
- Taxa de tráfego mediana
- Taxa de tráfego P95
- Taxa de tráfego máxima
Se você selecionar Pacotes enviados como o tipo de métrica e Origem e destino como agregação de tráfego, as opções a seguir estão disponíveis.
- Pacotes agregados
- Taxa de pacotes média
- Taxa de pacotes mediana
- Taxa de pacotes P95
- Taxa de pacotes máxima
O diagrama a seguir mostra o resultado do uso de duas opções de alinhamento de tráfego total e taxa de tráfego média.
Como usar o período de alinhamento
É possível usar a opção Período de alinhamento para agregar os fluxos de tráfego em intervalos de tempo da duração selecionada. Você pode ampliar ainda mais o gráfico e consultar os detalhes específicos, se necessário.
A seguir
- Analisar fluxos de tráfego
- Ativar a Análise de dados de registros
- Configure um bucket central
- Executar testes de conectividade no Flow Analyzer
- Monitorar seus fluxos de tráfego
- Resolver problemas de dados no Flow Analyzer