Estatísticas do Datastore em serviços agrupados legados

O Datastore mantém as estatísticas dos dados armazenados de um aplicativo, como o número de determinados tipos de entidades existentes ou o espaço usado por determinados tipos de valores de propriedade. É possível ver essas estatísticas no console do Google Cloud, na página Painel.

Esses valores também podem ser acessados de modo programático no aplicativo por meio de consulta de entidades especialmente nomeadas usando a API Datastore. Cada estatística é acessível como uma entidade com um sublinhado no início e outro no final do nome do tipo. Por exemplo, cada aplicativo tem exatamente uma entidade do tipo __Stat_Total__ que representa estatísticas sobre todas as entidades no Datastore no total. Cada entidade de estatística tem as seguintes propriedades:

  • count, o número de itens considerados pela estatística (um número inteiro longo)
  • bytes, o tamanho total dos itens para essa estatística (um número inteiro longo)
  • timestamp, a hora da atualização mais recente na estatística (um valor de data e hora)

Alguns tipos de estatística também têm propriedades extras, listadas abaixo.

Como o cliente do Datastore para Go requer nomes exportados, o acesso às propriedades listadas neste documento requer o uso de tags struct.

Ao criar novas entidades de estatística, o sistema de estatísticas não exclui as anteriores de imediato. A melhor maneira de obter uma visão consistente das estatísticas é consultar a entidade com o timestamp mais recente e usar o valor do carimbo de data/hora como um filtro ao buscar outras entidades de estatística.

As entidades de estatística são incluídas nos valores de estatística calculados. Elas ocupam um espaço relativo ao número de tipos únicos e nomes de propriedades usados pelo aplicativo.

O sistema de estatísticas também criará estatísticas específicas para cada namespace. Se um aplicativo não usar namespaces do Datastore, as estatísticas específicas de namespace não serão criadas. Essas estatísticas específicas de namespace são encontradas no namespace específico. Os nomes de tipo das estatísticas específicas do namespace recebem o prefixo __Stat_Ns_ e têm o mesmo sufixo correspondente aos tipos de estatísticas do aplicativo inteiro.

Aplicativos com milhares de namespaces, tipos ou nomes de propriedade exigem um número muito grande de entidades de estatísticas. Para não sobrecarregar o armazenamento e a atualização das estatísticas, o Datastore descarta as entidades estatísticas progressivamente, na seguinte ordem:

  • estatísticas por namespace, por tipo e por propriedade: __Stat_Ns_PropertyName_Kind__, __Stat_Ns_PropertyType_PropertyName_Kind__
  • estatísticas por tipo e por propriedade: __Stat_PropertyName_Kind__, __Stat_PropertyType_PropertyName_Kind__
  • estatísticas por namespace e por tipo: __Stat_Ns_Kind__, __Stat_Ns_Kind_IsRootEntity__, __Stat_Ns_Kind_NotRootEntity__, __Stat_Ns_PropertyType_Kind__
  • estatísticas por tipo: __Stat_Kind__, __Stat_Kind_IsRootEntity__, __Stat_Kind_NotRootEntity__, __Stat_PropertyType_Kind__
  • estatísticas por namespace: __Stat_Namespace__, __Stat_Ns_Kind_CompositeIndex__, __Stat_Ns_PropertyType__, __Stat_Ns_Total__

As entidades de estatísticas de resumo (__Stat_Kind_CompositeIndex__, __Stat_PropertyType__, __Stat_Total__) nunca são descartadas.

Veja abaixo a lista completa de estatísticas disponíveis:

Estatística Tipo de entidade de estatística Descrição
todas as entidades __Stat_Total__
Entrada específica do namespace:
__Stat_Ns_Total__
Todas as entidades. Propriedades adicionais:

entity_bytes: o armazenamento na tabela de entidades medido em bytes.
builtin_index_bytes: o armazenamento em entradas de índice integrado medido em bytes.
builtin_index_count: a contagem de entradas de índice integrado.
composite_index_bytes: o armazenamento em entradas de índice composto medido em bytes.
composite_index_count: a contagem de entradas de índice composto.
todas as entidades em um namespace __Stat_Namespace__
As entidades __Stat_Namespace__ são criadas para cada namespace encontrado e são encontradas apenas no namespace de string vazia.
Todas as entidades de um namespace.

subject_namespace, o namespace representado (uma string)
entity_bytes: o armazenamento na tabela de entidades medido em bytes.
builtin_index_bytes: o armazenamento em entradas de índice integrado medido em bytes.
builtin_index_count: a contagem de entradas de índice integrado.
composite_index_bytes: o armazenamento em entradas de índice composto medido em bytes.
composite_index_count: a contagem de entradas de índice composto.
todas as entradas em índices definidos pelo aplicativo __Stat_Kind_CompositeIndex__
Entrada específica do namespace: __Stat_Ns_Kind_CompositeIndex__
Entradas na tabela do índice composto, uma entidade de estatística para cada tipo de entidade armazenada. Propriedades adicionais:

index_id, o código do índice.
kind_name, o nome do tipo representado (uma string)
entidades de um tipo __Stat_Kind__
Entrada específica do namespace:
__Stat_Ns_Kind__
As entidades de um tipo, uma entidade de estatística para cada tipo de entidade armazenado. Propriedades adicionais:

kind_name, o nome do tipo representado (uma string)
entity_bytes: o armazenamento na tabela de entidades medido em bytes.
builtin_index_bytes: o armazenamento em entradas de índice integrado medido em bytes.
builtin_index_count: a contagem de entradas de índice integrado.
composite_index_bytes: o armazenamento em entradas de índice composto medido em bytes.
composite_index_count: a contagem de entradas de índice composto.
entidades raiz de um tipo __Stat_Kind_IsRootEntity__
Entrada específica do namespace:
__Stat_Ns_Kind_IsRootEntity__
Entidades de um tipo que são entidades raiz de um grupo de entidades (sem pai ancestral), uma entidade de estatística para cada tipo de entidade armazenado. Propriedades adicionais:

kind_name, o nome do tipo representado (uma string)
entity_bytes: o armazenamento na tabela de entidades medido em bytes.
entidades não raiz de um tipo __Stat_Kind_NotRootEntity__
Entrada específica do namespace:
__Stat_Ns_Kind_NotRootEntity__
Entidades de um tipo que não são entidades raiz do grupo de entidades (com pai ancestral), uma entidade de estatística para cada tipo de entidade armazenado. Propriedades adicionais:

kind_name, o nome do tipo representado (uma string)
entity_bytes: o armazenamento na tabela de entidades medido em bytes.
propriedades de um tipo __Stat_PropertyType__
Entrada específica do namespace:
__Stat_Ns_PropertyType__
Propriedades de um tipo de valor em todas as entidades, uma entidade de estatística por tipo de valor. Propriedades adicionais:

property_type, o nome do tipo de valor (uma string)
entity_bytes: o armazenamento na tabela de entidades medido em bytes.
builtin_index_bytes: o armazenamento em entradas de índice integrado medido em bytes.
builtin_index_count: a contagem de entradas de índice integrado.
propriedades de um tipo por tipo __Stat_PropertyType_Kind__
Entrada específica do namespace:
__Stat_Ns_PropertyType_Kind__
Propriedades de um tipo de valor nas entidades de determinado tipo, uma entidade de estatística por combinação de tipo de propriedade e tipo. Propriedades adicionais:

property_type, o nome do tipo de valor (uma string)
kind_name, o nome do tipo representado (uma string)
entity_bytes: o armazenamento na tabela de entidades medido em bytes.
builtin_index_bytes: o armazenamento no índice integrado medido em bytes.
builtin_index_count: a contagem de entradas de índice integrado.
propriedades com um nome __Stat_PropertyName_Kind__
Entrada específica do namespace:
__Stat_Ns_PropertyName_Kind__
Propriedades com determinado nome nas entidades de determinado tipo, uma entidade de estatística por combinação de nome de propriedade exclusivo e tipo. Propriedades adicionais:

property_name, o nome da propriedade (uma string)
kind_name, o nome do tipo representado (uma string)
entity_bytes: o armazenamento na tabela de entidades medido em bytes.
builtin_index_bytes: o armazenamento em entradas de índice integrado medido em bytes.
builtin_index_count: a contagem de entradas de índice integrado.
propriedades de um tipo e com um nome __Stat_PropertyType_PropertyName_Kind__
Entrada específica do namespace:
__Stat_Ns_PropertyType_PropertyName_Kind__
Propriedades com um determinado nome e de um tipo de valor determinado nas entidades de determinado tipo, uma entidade de estatística por combinação de nome de propriedade, tipo de valor e tipo existente no Datastore. Propriedades adicionais:

property_type, o nome do tipo de valor (uma string)
property_name, o nome da propriedade (uma string)
kind_name, o nome do tipo representado (uma string)
entity_bytes: o armazenamento na tabela de entidades medido em bytes.
builtin_index_bytes: o armazenamento em entradas de índice integrado medido em bytes.
builtin_index_count: a contagem de entradas de índice integrado.

Algumas estatísticas se referem aos tipos de valor de propriedade do Datastore pelo nome, como strings. Veja estes nomes:

  • "Blob"
  • "BlobKey"
  • "Boolean"
  • "Category"
  • "Date/Time"
  • "Email"
  • "Float"
  • "GeoPt"
  • "IM"
  • "Integer"
  • "Key"
  • "Link"
  • "NULL"
  • "PhoneNumber"
  • "PostalAddress"
  • "Rating"
  • "ShortBlob"
  • "String"
  • "Text"
  • "User"