Data Catalog
Um serviço gerenciado de metadados e descoberta de dados totalmente gerenciado e altamente escalonável.
Clientes novos ganham US$ 300 em créditos para gastar no Google Cloud durante a avaliação gratuita. Todos os clientes recebem até 1 MiB de armazenamento de metadados de negócios ou processamento e 1 milhão de chamadas de API gratuitamente.
-
Identifique seus dados com uma interface de pesquisa facetada simples e eficiente
-
Sincronize automaticamente metadados técnicos e crie tags esquematizadas para metadados de negócios
-
Crie tags para dados confidenciais automaticamente usando o Cloud Data Loss Prevention (DLP)
-
Acesse imediatamente e, em seguida, faça o escalonamento sem precisar configurar ou gerenciar a infraestrutura
Vantagens
Simplifique a descoberta de dados em qualquer escala
Capacite qualquer usuário da equipe a encontrar ou marcar com tag dados com uma IU eficiente, criada com a mesma tecnologia de pesquisa do Gmail ou pelo acesso à API. O Data Catalog é totalmente gerenciado para que você consiga iniciar e escalonar facilmente.
Oferece uma visualização unificada de todos os conjuntos de dados
Conheça seus recursos de dados no Google Cloud e muito mais. Integrações com o BigQuery, Pub/Sub, Cloud Storage e muitos outros conectores fornecem visualização unificada e mecanismo de inclusão de tags para metadados técnicos e comerciais.
Principais recursos
Principais recursos
Sem servidor
Um serviço de metadados totalmente gerenciado e escalonável que não requer qualquer configuração ou gerenciamento de infraestrutura, possibilitando que você se concentre nos negócios.
Metadados como serviço
Serviço de gerenciamento de metadados para catalogar recursos de dados por meio de APIs personalizadas e da IU, oferecendo visualização unificada dos dados, onde quer que estejam.
Catálogo central
Um sistema de catalogação flexível e eficaz para capturar metadados técnicos (automaticamente) e corporativos (tags) em formato estruturado.
Novidades
Novidades
Inscreva-se na newsletter do Google Cloud para receber atualizações de produtos, informações sobre eventos, ofertas especiais e muito mais.
Documentação
Documentação
Visão geral do Data Catalog
Descubra por que você precisa de um Data Catalog e como ele permite o uso eficiente dos seus dados.
Guia de início rápido sobre como incluir tags em conjuntos de dados
Faça um conjunto de dados do BigQuery, crie um modelo de tag com um esquema, procure a entrada do Data Catalog para a tabela e anexe a tag nela.
Como pesquisar com o Data Catalog
Use o Data Catalog para pesquisar recursos de dados, como conjuntos de dados, tabelas, visualizações e tópicos do Pub/Sub nos seus projetos do Google Cloud.
Como restringir o acesso com a segurança no nível da coluna do BigQuery
Nesta página, explicamos como usar a segurança no nível da coluna do BigQuery para restringir o acesso aos dados do BigQuery no nível da coluna.
Como acessar conectores de metadados locais no GitHub
Código do Commons usado pelos conectores do Data Catalog e links para o código de amostra dos conectores.
Casos de uso
Casos de uso
Embora você possa usar a API Data Catalog para criar seus próprios conectores para o processamento de metadados de uma fonte de dados de sua escolha, nós fornecemos conectores de código aberto do tipo "prontos para uso" para o processamento de metadados de várias fontes de dados comuns, como MySQL, PostgreSQL, Hive, Teradata, Oracle, SQL Server, Redshift e muito mais. Uma vez no Data Catalog, todos os recursos podem ser pesquisados e marcados com tags.
A API Data Catalog pode ser usada no processamento de metadados de qualquer recurso de Business Intelligence. Para o Looker e o Tableau, temos conectores de código aberto prontos para uso para que sejam facilmente detectáveis e possam ser marcados com uma tag diretamente no Data Catalog.
Todos os recursos
Todos os recursos
Sem servidor | Um serviço de metadados totalmente gerenciado e escalonável que não requer nenhuma configuração ou gerenciamento de infraestrutura, possibilitando que você se concentre nos negócios. |
Metadados como serviço | Serviço de gerenciamento de metadados para catalogar recursos de dados por meio de APIs personalizadas e da IU, oferecendo uma visualização unificada dos dados onde quer que estejam. |
Catálogo central | Um sistema de catalogação flexível e eficaz para capturar metadados técnicos (automaticamente) e corporativos (tags) em formato estruturado. |
Pesquisa e descoberta | Uma IU simples e fácil de usar, que conta com recursos de pesquisa estruturados e eficientes para localizar dados com rapidez e facilidade e com tecnologia de Pesquisa Google que oferece suporte ao Gmail e ao Drive. |
Metadados esquematizados | Oferece suporte a tags esquematizadas (por exemplo, Enum, Bool e DateTime) e não apenas tags de texto simples, oferecendo às organizações metadados corporativos avançados e organizados. |
Integração com Cloud DLP | Descobre e classifica dados confidenciais, oferecendo inteligência e ajudando a simplificar o processo de controle dos seus dados. |
Conectores no local | Ingira metadados técnicos de recursos de dados que não são do Google Cloud e os importe para o Data Catalog para ter uma visualização unificada de todos os recursos de dados. |
Integração com Cloud IAM | Oferece controles de nível de acesso e cumpre as ACLs de origem para leitura, gravação e e pesquisa de recursos de dados, proporcionando a você um controle de acesso de nível empresarial. |
Governança | Oferece uma base sólida de segurança e conformidade com as integrações com Cloud DLP e Cloud IAM. |
Preços
Preços
A fixação de preços para o Data Catalog é dividida entre armazenamento de metadados e chamadas de API, ambos com base no consumo. O armazenamento de metadados abrange qualquer metadado novo armazenado no Data Catalog, incluindo:
• Metadados corporativos, como tags e modelos de tags do Data Catalog
• Esquemas de conjuntos de arquivos do Cloud Storage anexados aos temas do Pub/Sub
• Metadados do tipo personalizado armazenados no Data Catalog etc.
O armazenamento de metadados não inclui os metadados técnicos armazenados por outros serviços do Google Cloud, por exemplo, tabela de conjuntos de dados e nomes de colunas armazenados no BigQuery. A fixação detalhada de preços e os exemplos de armazenamento de metadados e chamadas de API podem ser encontrados na documentação do Data Catalog.