Entradas e grupos de entradas são conceitos importantes no Data Catalog.
A ilustração a seguir mostra como as entradas e os grupos de entradas se encaixam Modelo de dados do Data Catalog.
Entradas
As entradas do Data Catalog representam os recursos de dados:
- Recursos do Google Cloud, como um conjunto de dados ou tabela do BigQuery, tópico do Pub/Sub etc.
- Recursos personalizados com tipos de dados personalizados.
Você pode criar, pesquisar e gerenciar suas entradas. Para mais informações, consulte Criar entradas personalizadas do Data Catalog para suas fontes de dados.
Grupos de entradas
As entradas estão contidas em um grupo de entradas. Um grupo de entradas é um conjunto de entradas logicamente relacionadas junto com as políticas de Gerenciamento de identidade e acesso que especificam os usuários que podem criar, editar e visualizar entradas em um grupo de entradas.
O Data Catalog cria automaticamente grupos de entrada para recursos do
Google Cloud, como BigQuery (@bigquery) e tópicos do Pub/Sub
(@pubsub).
Os grupos de entrada do BigQuery e do Pub/Sub são exclusivos, porque não é possível executar funções de API que normalmente funcionam em grupos de entrada personalizados. Alguns exemplos dessas funções são recuperar a lista de grupos de entrada em um projeto, extrair informações básicas sobre um grupo de entrada e criar ou excluir uma tag.
Você cria seu próprio grupo de entradas para conter as entradas do conjunto de arquivos do Cloud Storage e as políticas do IAM associadas a essas entradas. Para mais informações, consulte Mostrar arquivos do Cloud Storage com entradas de conjunto de arquivos.
Os grupos de entradas, assim como as entradas, são pesquisáveis.
Mapear recursos de dados para entradas e grupos de entradas
Consulte as tabelas a seguir para saber como o Data Catalog mapeia os recursos de dados de diferentes produtos do Google Cloud.
| Recurso do metastore do Dataproc | Recurso do Data Catalog |
|---|---|
| Serviço | Entrada e grupo de entrada |
| Banco de dados | Entrada |
| Tabela | Entrada |
| Recurso do Dataplex | Recurso do Data Catalog |
|---|---|
| Lake | Entrada e grupo de entrada |
| Zona | Entrada |
| Tabela | Entrada |
| Conjunto de arquivos | Entrada |
| Recurso do Pub/Sub | Recurso do Data Catalog |
|---|---|
| Tópico | Entrada em um grupo de entradas do Pub/Sub |
| Recurso do Bigtable | Recurso do Data Catalog |
|---|---|
| Instância | Entrada e grupo de entrada |
| Cluster | Atributo dentro de uma entrada de instância |
| Tabela | Entrada dentro do grupo de entrada de instância |
| Grupos de colunas | Atributo dentro de uma entrada de tabela |
| Recurso do BigQuery | Recurso do Data Catalog |
|---|---|
| Conjunto de dados | Entrada em um grupo de entradas do BigQuery |
| Conjunto de dados vinculado | Entrada em um grupo de entradas do BigQuery |
| Tabela | Entrada em um grupo de entradas do BigQuery |
| Ver | Entrada em um grupo de entradas do BigQuery |
| Modelo | Entrada em um grupo de entradas do BigQuery |
| Rotina | Entrada em um grupo de entradas do BigQuery |
| Conexão | Entrada em um grupo de entradas do BigQuery |
| Recurso da Vertex AI | Recurso do Data Catalog |
|---|---|
| Modelo | Entrada em um grupo de entrada da Vertex AI |
| Conjunto de dados | Entrada dentro de um grupo de entradas da Vertex AI |
| FeatureGroup | Entrada em um grupo de entrada da Vertex AI |
| FeatureOnlineStore | Entrada dentro de um grupo de entradas da Vertex AI |
| FeatureView | Entrada dentro de um grupo de entradas da Vertex AI |