Dataplex
利用 Dataplex 的智能数据结构摆脱数据孤岛,使组织能够通过一致的控制集中发现、管理、监控和治理跨数据湖、数据仓库和数据集市的数据,提供对可信数据的访问并支持大规模分析。
-
跨数据孤岛管理数据的单一管理平台
-
通过全球控制进行集中式安全和治理,从而实现分布式数据所有权
-
基于业务情境在分布式数据中进行统一搜索和数据发现
-
内置的数据智能可实现对数据的信任,并更快获取数据洞见
-
一个开放平台,支持开源工具和强大的合作伙伴生态系统
优势
自由选择
在选择出色分析工具(开源或云原生)的同时,以较优的价格和性能自由地将数据存储在您想要的位置,以加快整个分析生命周期。
智能自动化
使用 Google 一流的 AI/机器学习功能的内置数据智能可实现数据发现、元数据收集、数据生命周期管理和数据质量和沿袭的自动化,以降低管理费用。
统一治理
实现元数据、安全政策、治理和数据分类的标准化和统一,以实现跨分布式数据的一致性。
主要特性
主要特性
简化的数据发现
利用内置的数据智能,对存储在 Google Cloud 以及其他位置的结构化、半结构化和非结构化数据自动执行数据发现、分类和元数据丰富。在统一、灵活且强大的 Data Catalog 中管理所有数据的技术、运营和业务元数据。 内置使用与 Gmail 相同的搜索技术的分面搜索界面,您可以轻松搜索、查找和理解数据。
数据整理和生命周期管理
使用 Dataplex 数据湖和数据可用区,将跨多个存储服务的数据按逻辑整理为特定业务领域。只需点击一下,即可轻松管理、挑选、分层和归档数据。
集中式安全和治理
支持跨数据孤岛对数据授权和分类进行集中的政策管理、监控和审核。通过全球监控和治理,基于公司网域确定分布式数据所有权。
内置数据质量和沿袭
自动处理分布式数据中的数据质量,实现对可信数据的访问。使用自动捕获的数据沿袭可更好地理解数据,跟踪依赖关系,并有效地排查数据问题。
无服务器数据探索
使用无服务器数据探索工作台中以交互方式查询完全治理的高质量数据,只需点击一下即可访问 Spark SQL 脚本和 Jupyter 笔记本。使用内置的发布、共享和搜索功能轻松开展跨团队协作。通过工作台中的一键式安排将您的工作付诸使用。
“我们在 Google Cloud 中存储了数 PB 的数据,每天有数千个内部用户访问这些数据。借助 Dataplex,我们能够跨分布式数据提供一个业务领域特定的自助式数据平台,同时实现分散式数据所有权以及集中式治理和可见性。我们很高兴地告知您我们采用 Dataplex 作为跨分析数据构建统一数据网格的核心组件。”
Snap Inc 工程总监 Saral Jain
最新资讯
想要详细了解 Dataplex?
文档
文档
Dataplex 的工作原理
在您识别新数据源时,Dataplex 会利用内置数据质量检查功能收集结构化和非结构化数据的元数据,以增强完整性。
Data Catalog 概览
了解 Data Catalog 如何帮助您高效使用数据。
如何开始使用 Dataplex
以逻辑方式整理存储在数据湖和数据区域中的数据,并跨数据自动执行数据管理和治理,以支持大规模分析。
如何使用 Data Catalog 进行搜索
使用 Data Catalog 查找 Google Cloud 项目中的数据集、表、视图和 Pub/Sub 主题等数据资产。
Dataplex 最佳实践
遵循以下最佳实践来优化 Dataplex 体验。
Dataplex API
使用 Dataplex API 集中管理和治理分布式数据。
Data Catalog API
使用 Data Catalog API 集中管理和丰富分布式数据的元数据。
使用场景
使用场景
使用 Dataplex 跨 Cloud Storage 和 BigQuery 中的数据构建特定于业务领域的数据网格架构。实现分散式数据所有权,同时仍可集中管理、监控和治理整个企业内的数据,并使各种分析和数据科学工具能够安全地访问这些数据。
您可以使用 Dataplex 中的全代管式无服务器 Data Catalog 轻松地跨数据孤岛搜索和发现数据资产。Data Catalog 内置众多功能,可自动注入技术元数据,使用相关的业务上下文丰富元数据,使组织中的每个用户都可以使用强大的分面搜索界面轻松查找和理解其数据。
价格
价格
Dataplex 价格基于随用随付的用量,包括:
- Dataplex 处理,涵盖 Dataplex 中的数据发现功能
- Data Catalog 元数据存储
- Data Catalog 读取、写入和搜索 API 调用
此产品目前为预览版。详细了解产品发布阶段。
Cloud AI 产品遵循我们的服务等级协议 (SLA) 政策。这些产品在延迟时间或可用性方面的保证可能与其他 Google Cloud 服务有所不同。