Faça a gestão de recursos de dados com o catálogo de dados

O Data Catalog cataloga automaticamente os metadados sobre os recursos do Bigtable. Esta funcionalidade ajuda a sua organização a pesquisar e gerir os seus recursos de dados do Bigtable.

Os metadados são sincronizados automaticamente do Bigtable para o Data Catalog para os seguintes recursos do Bigtable:

  • Instâncias
  • Clusters
  • Tabelas, incluindo detalhes da família de colunas

O Data Catalog é um serviço de gestão de metadados totalmente gerido. Oferece uma vista unificada e mecanismos de etiquetagem para metadados técnicos e empresariais. Para saber mais sobre o catálogo de dados e por que motivo o deve usar, consulte o artigo O que é o catálogo de dados.

Vantagens da utilização do catálogo de dados com o Bigtable

As informações do catálogo de dados sobre os seus dados podem ajudar a facilitar a análise, a reutilização de dados, o desenvolvimento de aplicações e a gestão de dados.

Pode pesquisar entradas no catálogo de dados por nome do recurso ou por detalhes. Por exemplo, pode pesquisar um nome de instância para encontrar a entrada de uma instância ou pesquisar uma família de colunas para encontrar a entrada de uma tabela. Também pode usar uma pesquisa detalhada, aplicando filtros para restringir a pesquisa. Para mais informações, consulte o artigo Pesquise e veja recursos de dados com o catálogo de dados.

A etiquetagem de recursos de dados pode ajudar a compreender e catalogar os dados que estão disponíveis nas suas tabelas do Bigtable para tornar os dados mais detetáveis e pesquisáveis por outros utilizadores do Data Catalog e como parte do seu conjunto de dados mais amplo. Usa etiquetas para adicionar os seus próprios metadados aos metadados catalogados e, em seguida, pode usar essas etiquetas para fazer pesquisas.

Comece a usar o catálogo de dados

Para começar a usar o catálogo de dados para gerir os seus recursos de dados do Bigtable, conclua as seguintes tarefas:

  1. Se está a usar o catálogo de dados pela primeira vez, ative a API.

  2. Conceda funções de IAM a responsáveis que precisem de acesso a entradas do Bigtable no Data Catalog.

  3. Saiba como pesquisar recursos de dados lendo o artigo Como pesquisar com o catálogo de dados.

  4. Reveja a sintaxe de pesquisa do Data Catalog para saber como encontrar os seus metadados.

  5. Leia os conceitos sobre a etiquetagem de entradas do catálogo de dados em Etiquetas e modelos de etiquetas

Formas de pesquisar metadados do Bigtable

Pode pesquisar metadados do Bigtable sincronizados através do Data Catalog.

Além dos qualificadores padrão, pode pesquisar recursos do Bigtable com o seguinte:

  • Instância

    • Nome da instância do Bigtable
    • ID da instância do Bigtable
    • Localização do cluster
    • ID do cluster

  • Tabela

    • ID da tabela
    • Nome da família de colunas
    • Nome da instância do Bigtable
    • ID da instância do Bigtable

Funções necessárias

A visualização, a etiquetagem e a pesquisa de recursos do Bigtable no Data Catalog têm requisitos de autorização diferentes. Em geral, conceda aos principais na sua organização a função mínima necessária para realizar uma tarefa.

Autorização para ver etiquetas públicas e privadas

Para receber as autorizações necessárias para ver etiquetas públicas e privadas em recursos do Bigtable, peça ao seu administrador para lhe conceder as seguintes funções de IAM:

Estas funções predefinidas contêm as autorizações necessárias para ver etiquetas públicas e privadas. As autorizações exatas necessárias são as seguintes:

  • bigtable.instances.get
  • bigtable.clusters.get
  • bigtable.tables.get
  • datacatalog.tagTemplates.getTag

Autorização para pesquisar recursos do Bigtable

Para receber as autorizações necessárias para pesquisar recursos do Bigtable no Data Catalog, peça ao seu administrador para lhe conceder as seguintes funções do IAM:

Estas funções predefinidas contêm as autorizações necessárias para pesquisar recursos do Bigtable. As autorizações exatas necessárias são as seguintes:

  • bigtable.instances.get
  • bigtable.clusters.get
  • bigtable.tables.get

Autorização para anexar etiquetas a recursos do Bigtable

Para receber as autorizações necessárias para anexar etiquetas a recursos do Bigtable no Data Catalog, peça ao seu administrador para lhe conceder as seguintes funções do IAM:

Estas funções predefinidas contêm as autorizações necessárias para adicionar etiquetas públicas e privadas. As autorizações exatas necessárias são as seguintes:

  • bigtable.instances.update
  • bigtable.clusters.update
  • bigtable.tables.update
  • datacatalog.tagTemplates.use
  • datacatalog.entries.updateTag

(Opcional) Crie uma função personalizada

Pode criar uma função personalizada para conceder aos utilizadores que precisam de acesso completo a todos os metadados do Bigtable no Data Catalog no seu projeto ou organização. Em seguida, pode tornar qualquer utilizador ou conta de serviço que precise de acesso um principal da função personalizada. Para saber mais sobre as funções personalizadas, consulte o artigo Funções e autorizações.

Escolha um nome significativo para a função, como Editor do Data Catalog do Bigtable, e, em seguida, atribua apenas os responsáveis que precisam de acesso à função. Para obter instruções de configuração, consulte o artigo Criar uma função personalizada.

Conceda as seguintes autorizações à função personalizada:

  • bigtable.instances.get
  • bigtable.instances.update
  • bigtable.clusters.get
  • bigtable.clusters.update
  • bigtable.tables.get
  • bigtable.tables.update
  • datacatalog.tagTemplates.getTag
  • datacatalog.tagTemplates.use

Para ver detalhes sobre as autorizações do catálogo de dados, consulte o artigo Funções para pesquisar recursos.Google Cloud Para ver descrições das autorizações do Bigtable, consulte o artigo Autorizações.

Restrições conhecidas

A secção seguinte apresenta algumas restrições que tem de ter em atenção antes de usar o Catálogo de dados para gerir os metadados do Bigtable.

Restrições de localização

Se a sua organização tiver configurado restrições de localização, as entradas de metadados dos seus recursos do Bigtable podem não ser sincronizadas com o Data Catalog. Todas as entradas criadas antes da aplicação das restrições de localização são retidas pelo catálogo de dados.

Para permitir que o catálogo de dados carregue recursos, recomendamos que adicione a multirregião global à sua política de localização.

Exceção do nome da família de colunas

A API Data Catalog rejeita pedidos em que o nome da família de colunas no seu pedido inclui um ponto (.). Por exemplo, se o nome da família de colunas for personal.info.

O que se segue?