Data Catalog
伸缩能力极强的全代管式数据发现和元数据管理服务。
新客户可获得 $300 赠金,用于在免费试用期间抵扣在 Google Cloud 上的支出。所有客户可免费享受高达 1 MiB 的企业数据或提取的元数据存储空间和 100 万次 API 调用。
免费试用 Google Cloud-
利用简单而强大的分面搜索界面查找数据
-
自动同步技术元数据并为业务元数据创建架构化标记
-
通过 Cloud Data Loss Prevention (DLP) 集成,自动标记敏感数据
-
立即开始使用,无需设置或管理基础架构即可轻松扩容
优势
简化任何规模的数据发现
让团队里的任何用户都能通过强大的界面(使用与 Gmail 同样的搜索技术构建而成)或 API 来查找或标记数据。Data Catalog 是一项全代管式服务,因此您可以轻松无忧地开始使用和扩容。
集中查看所有数据集
了解您在 Google Cloud 内外的数据资产。与 BigQuery、Pub/Sub、Cloud Storage 及诸多连接器集成,可让您集中查看技术元数据和业务元数据,还为这些元数据提供了标记机制。
主要特性
主要特性
无服务器
可伸缩的全代管式元数据管理服务,不要求您设置或管理任何基础架构,因而您能集中精力发展业务。
元数据即服务
利用元数据管理服务,您可以使用自定义 API 和界面对数据资产进行编目,从而集中查看任何位置的数据。
集中式目录
灵活而强大的编目系统,能够自动捕获技术元数据并利用标记以结构化格式捕获业务元数据。
最新资讯
文档
文档
快速入门:标记数据集
创建 BigQuery 数据集、创建包含架构的标记模板、查找表的 Data Catalog 条目,以及将标记附加到表。
如何使用 Data Catalog 进行搜索
使用 Data Catalog 查找 Google Cloud 项目中的数据集、表、视图和 Pub/Sub 主题等数据资产。
利用 BigQuery 的列级安全性来限制访问权限
此页面介绍如何使用 BigQuery 的列级安全性来限制对 BigQuery 列级数据的访问权限。
在 GitHub 上访问本地元数据连接器
Data Catalog 连接器所用的通用代码以及指向连接器示例代码的链接。
使用场景
使用场景
虽然您可以使用 Data Catalog API 自行创建连接器以从所选数据源提取元数据,但我们仍为您提供了“现成可用”的开源连接器,可用于从 MySQL、PostgreSQL、Hive、Teradata、Oracle、SQL Server、Redshift 等一些常见数据源提取元数据。进入 Data Catalog 后,您便可以搜索和标记所有资产。
Data Catalog API 可用于从任意商业智能资产中提取元数据。对于 Looker 和 Tableau,我们提供了现成可用的开源连接器,这样便可直接在 Data Catalog 中发现和标记 Looker 和 Tableau 的资产。
所有特性
所有特性
无服务器 | 可伸缩的全代管式元数据管理服务,不要求您设置或管理任何基础架构,因而您能集中精力发展业务。 |
元数据即服务 | 利用元数据管理服务,您可以使用自定义 API 和界面对数据资产进行编目,从而集中查看任何位置的数据。 |
集中式目录 | 灵活而强大的编目系统,能够自动捕获技术元数据并利用标记以结构化格式捕获业务元数据。 |
搜索和发现 | 界面简单易用,具有强大的结构化搜索功能,可让您轻松地快速查找数据资产,使用与 Gmail 和云端硬盘所用相同的 Google 搜索技术。 |
架构化元数据 | 支持架构化标记(例如 Enum、Bool、DateTime)而不仅仅是简单的文本标记,为组织提供丰富且有条理的业务元数据。 |
Cloud DLP 集成 | 发现敏感数据并对其进行分类,以提供情报并帮助简化数据治理过程。 |
本地连接器 | 将非 Google Cloud 数据资产的技术元数据提取到 Data Catalog,可让您集中查看所有数据资产。 |
Cloud IAM 集成 | 提供访问权限级别控制功能,在对数据资产进行读取、写入和搜索时遵循源 ACL,让您获享企业级的访问权限掌控力。 |
治理 | 集成了 Cloud DLP 和 Cloud IAM,可提供坚实的安全性和合规性基础。 |
价格
价格
Data Catalog 价格分为元数据存储价格和 API 调用价格,两者均按用量计费。元数据存储涵盖 Data Catalog 中存储的所有新元数据,包括:
• 业务元数据,例如 Data Catalog 标记模板和标记
• 附加到 Pub/Sub 主题的 Cloud Storage 文件集架构
• Data Catalog 中存储的自定义类型元数据等
元数据存储不涵盖其他 Google Cloud 服务存储的技术元数据,如 BigQuery 中存储的数据集表和列名称。如需查看元数据存储和 API 调用的详细价格和示例,请参阅 Data Catalog 文档。