Dataplex Universal Catalog

インテリジェント データから AI ガバナンスを実現

データ プラットフォーム全体でデータと AI アーティファクトを一元的に検出、管理、モニタリング、統制し、信頼できるデータへのアクセスを提供して、大規模な分析と AI 活用を強力に支えます。

機能

Vertex AI インテグレーションを使用したデータから AI ガバナンスへの移行

必要な AI モデル、データセット、機能、関連するデータ アーティファクトを、IAM 権限を尊重しながら、プロジェクトやリージョンをまたいで 1 つの検索エクスペリエンスで即座に見つけることができます。Dataplex Universal Catalog を使用して、所有権、主要な属性、関連するコンテキストなど、情報に基づいた意思決定に必要な重要なビジネス メタデータで AI アーティファクトを拡充します。



BigQuery におけるデータ ガバナンス

エンドツーエンドのデータ ライフサイクルをサポートし、お客様の現状に応じて、BigQuery でのデータの管理、検出、統制を容易にします。データ品質、データリネージ、プロファイリングなどの Dataplex Universal Catalog の機能を BigQuery に直接組み込み、コンテキストに応じたガバナンスを提供します。

生成 AI を活用した分析情報とセマンティック検索

データに対する質問の厳選リストを使って分析を速やかに開始できます。Data Insights は、メタデータと最先端の Gemini モデルの力を活用して、データから隠れたパターンや価値ある分析情報を明らかにするカスタマイズされたクエリを生成します。データのセマンティック メタデータ検索では、任意の言語を使用してデータを検出できます。ユーザーは自然言語クエリを使用してデータアセットを検索できるため、検索構文や修飾子を覚える必要がありません。

ユニバーサル セマンティック検索によるデータ検出の簡素化

組み込みのデータ検索機能を活用して、Google Cloud 内外に保存された構造化データ、半構造化データ、非構造化データの検出、分類、メタデータ拡張を自動化します。すべてのデータの技術、運用、ビジネス上のメタデータを、統合された、柔軟で強力なカタログで管理します。組み込みのビジネス用語集を使用して、関連するビジネス コンテキストでメタデータを拡充します。組み込みのグローバルなファセット検索機能により、自然言語を使用してデータを簡単に検索、発見、把握できます。

エンドツーエンドのデータリネージ。

エンドツーエンドのデータリネージにより、データの出所とデータの変換処理を簡単に把握できます。エンドツーエンドのデータリネージは、Google Cloud データソース用に自動的に処理され、サードパーティのデータソースに拡張できます。

自動化されたデータ品質

自動的に収集されたデータリネージと組み込みのデータ プロファイリングを使用して、データへの理解を深め、依存関係をトレースし、データの問題を効果的にトラブルシューティングできます。分散データ全体にわたってデータ品質の管理を自動化し、信頼できるデータにアクセスできるようにします。

仕組み

Dataplex Universal Catalog を使用すると、データレイク、ウェアハウス、データベース全体でデータと AI アーティファクトを管理、モニタリング、統制できます。ユーザーがデータ プロファイルの作成、データ品質の評価、データリネージの決定、データの分類、データの領域への整理、AI ライフサイクルのデータの管理と統制をインテリジェントに行うのに役立ちます。

一般的な使用例

データから AI ガバナンスを実現

Dataplex と Vertex AI によるデータから AI へのガバナンス

単一の検索エクスペリエンスで、組織全体のデータ アセットと AI アセットを検出し、IAM 権限を遵守しながら、プロジェクトとリージョンにまたがる AI モデル、データセット、関連するデータ アーティファクトを瞬時に検出できます。また、ビジネス コンテキストでアセットを拡張したり、ビジネス メタデータで AI アーティファクトを拡充したりすることで、所有権、主要な属性、関連コンテキストなど、情報に基づいた意思決定を行うことができます。

    Dataplex と Vertex AI によるデータから AI へのガバナンス

    単一の検索エクスペリエンスで、組織全体のデータ アセットと AI アセットを検出し、IAM 権限を遵守しながら、プロジェクトとリージョンにまたがる AI モデル、データセット、関連するデータ アーティファクトを瞬時に検出できます。また、ビジネス コンテキストでアセットを拡張したり、ビジネス メタデータで AI アーティファクトを拡充したりすることで、所有権、主要な属性、関連コンテキストなど、情報に基づいた意思決定を行うことができます。

      データメッシュを構築する

      Dataplex Universal Catalog を使用してデータメッシュを構築する

      データメッシュは、データの所有権を分散させ、ドメイン データオーナーが管理する戦略です。データセットを複数の場所に分散させることで、データ アクセシビリティと運用効率を向上させることができます。Dataplex は、データと関連するアーティファクトをデータドメインに論理的に整理するのに役立ちます。これにより、分散データを統合し、ビジネス コンテキストに基づいて整理できます。

      データメッシュ アーキテクチャ

        Dataplex Universal Catalog を使用してデータメッシュを構築する

        データメッシュは、データの所有権を分散させ、ドメイン データオーナーが管理する戦略です。データセットを複数の場所に分散させることで、データ アクセシビリティと運用効率を向上させることができます。Dataplex は、データと関連するアーティファクトをデータドメインに論理的に整理するのに役立ちます。これにより、分散データを統合し、ビジネス コンテキストに基づいて整理できます。

        データメッシュ アーキテクチャ

          データ分析を民主化する

          Dataplex ユニバーサル カタログでデータ分析情報を民主化

          フルマネージドでサーバーレスの Dataplex Universal Catalog を使用して、サイロ全体でデータと AI アーティファクトを検索、検出します。カタログには、技術的なメタデータを自動的に取り込み、関連するビジネス コンテキストでメタデータを拡充し、組織内のすべてのユーザーが強力なファセット検索インターフェースを使用して、データや AI アーティファクトを簡単に見つけ、理解できるようにする機能が組み込まれています。

            Dataplex ユニバーサル カタログでデータ分析情報を民主化

            フルマネージドでサーバーレスの Dataplex Universal Catalog を使用して、サイロ全体でデータと AI アーティファクトを検索、検出します。カタログには、技術的なメタデータを自動的に取り込み、関連するビジネス コンテキストでメタデータを拡充し、組織内のすべてのユーザーが強力なファセット検索インターフェースを使用して、データや AI アーティファクトを簡単に見つけ、理解できるようにする機能が組み込まれています。

              オープン レイクハウスを管理する

              Apache Iceberg とオープンソース エンジンの統合ガバナンス

              Dataplex Universal Catalog は、Google Cloud のネイティブな Apache Iceberg ストレージ エンジンである BigLake と緊密に統合されています。BigLake Metastore は Dataplex Universal Catalog でネイティブにサポートされているため、一元的に定義されたガバナンス ポリシーが複数のエンジンにわたって確実に適用されます。Dataplex Universal Catalog 内で BigLake をサポートすることで、セマンティック検索、データリネージ、プロファイリング、品質チェックをサポートし、プラットフォーム全体のガバナンスを強化して、オープン データ レイクハウスのマネージド基盤を提供します。

                Apache Iceberg とオープンソース エンジンの統合ガバナンス

                Dataplex Universal Catalog は、Google Cloud のネイティブな Apache Iceberg ストレージ エンジンである BigLake と緊密に統合されています。BigLake Metastore は Dataplex Universal Catalog でネイティブにサポートされているため、一元的に定義されたガバナンス ポリシーが複数のエンジンにわたって確実に適用されます。Dataplex Universal Catalog 内で BigLake をサポートすることで、セマンティック検索、データリネージ、プロファイリング、品質チェックをサポートし、プラットフォーム全体のガバナンスを強化して、オープン データ レイクハウスのマネージド基盤を提供します。

                  Apache Spark ワークフローの自動化

                  Spark と SparkSQL のカスタムタスクのスケジュールを設定する

                  Dataplex Universal Catalog では、データメッシュやレイクハウス内でカスタムの Spark タスクや Spark SQL タスクを直接スケジュールすることで、データ ライフサイクルを自動化および管理できます。この機能により、データの取り込み、複雑な変換、データ品質チェックなどの一般的なデータ処理オペレーションが効率化され、データが常に正確かつ最新の状態に保たれ、分析や AI ワークロードに対応できます。

                    Spark と SparkSQL のカスタムタスクのスケジュールを設定する

                    Dataplex Universal Catalog では、データメッシュやレイクハウス内でカスタムの Spark タスクや Spark SQL タスクを直接スケジュールすることで、データ ライフサイクルを自動化および管理できます。この機能により、データの取り込み、複雑な変換、データ品質チェックなどの一般的なデータ処理オペレーションが効率化され、データが常に正確かつ最新の状態に保たれ、分析や AI ワークロードに対応できます。

                      料金

                      Dataplex Universal Catalog の料金Dataplex Universal Catalog の料金は、従量課金制に基づいて計算されます。
                      サービスと使用状況説明料金(米ドル)

                      Dataplex Universal Catalog の処理

                      Dataplex Universal Catalog のスタンダード処理とプレミアム処理は、データ コンピューティング ユニット(DCU)によって計測されます。DCU 時間は、Dataplex の抽象的な課金単位であり、実際の計測は使用した個々の機能によって異なります。

                      無料レベルの Dataplex Universal Catalog の処理

                      Dataplex ユニバーサル カタログの標準処理の 1 か月あたり最初の 100 DCU 時間。

                      無料

                      Dataplex Universal Catalog の標準処理

                      Dataplex Universal Catalog のスタンダード ティアは、Cloud Storage からテーブルとファイルセットのメタデータを自動的に検出するデータ検出機能を対象にしています。

                      目安

                      $0.060

                      DCU 時間あたり

                      Dataplex Universal Catalog のプレミアム処理

                      Dataplex ユニバーサル カタログのプレミアム処理ティアは、データ探索ワークベンチデータリネージデータ品質、Dataplex のデータ プロファイルの機能を対象にしています。

                      目安

                      $0.089

                      DCU 時間あたり

                      Dataplex Universal Catalog のメタデータと API の料金

                      メタデータ ストレージの料金

                      Dataplex Universal Catalog では、保存されているメタデータの平均量が短い間隔で測定されますこのような測定値は料金請求を目的として 1 か月間の平均値にまとめられ、この平均値に月単位のレートが乗算されます。


                      Dataplex Universal Catalog の無料枠

                      月間平均ストレージの最初の 1 MiB。

                      無料

                      メタデータ ストレージ

                      1 MiB を超える月間平均ストレージ。

                      目安

                      $2

                      1 GiB あたりの月額

                      API 料金

                      Dataplex Universal Catalog の料金は、Data Catalog API および Data Lineage API への API 呼び出しに対して発生します。

                      API 呼び出し

                      毎月最初の 100 万回。

                      無料

                      API 呼び出し

                      1 か月に 100 万回超

                      目安

                      $10

                      API 呼び出し 100,000 回あたり

                      Dataplex Universal Catalog シャッフル ストレージの料金

                      シャッフル ストレージの料金には、データ探索ワークベンチ用に構成された環境で指定されたディスク ストレージが含まれます。

                      目安

                      $0.040

                      GB 単位 / 月

                      その他の使用状況

                      Dataplex Universal Catalog のデータ編成機能(レイク、ゾーン、またはアセットのセットアップ)とセキュリティ ポリシーの適用および反映は、無料で提供されます。

                      Dataplex Universal Catalog の一部の機能は、DataprocBigQueryDataflow を使用してジョブの実行をトリガーします。これらのサービスの使用量は、それぞれの料金モデルに従って課金され、料金はそれぞれのサービスの下に表示されます。

                      Dataplex Universal Catalog の料金

                      Dataplex Universal Catalog の料金は、従量課金制に基づいて計算されます。

                      Dataplex Universal Catalog の処理

                      説明

                      Dataplex Universal Catalog のスタンダード処理とプレミアム処理は、データ コンピューティング ユニット(DCU)によって計測されます。DCU 時間は、Dataplex の抽象的な課金単位であり、実際の計測は使用した個々の機能によって異なります。

                      料金(米ドル)

                      無料レベルの Dataplex Universal Catalog の処理

                      Dataplex ユニバーサル カタログの標準処理の 1 か月あたり最初の 100 DCU 時間。

                      説明

                      無料

                      Dataplex Universal Catalog の標準処理

                      Dataplex Universal Catalog のスタンダード ティアは、Cloud Storage からテーブルとファイルセットのメタデータを自動的に検出するデータ検出機能を対象にしています。

                      説明

                      Starting at

                      $0.060

                      DCU 時間あたり

                      Dataplex Universal Catalog のプレミアム処理

                      Dataplex ユニバーサル カタログのプレミアム処理ティアは、データ探索ワークベンチデータリネージデータ品質、Dataplex のデータ プロファイルの機能を対象にしています。

                      説明

                      Starting at

                      $0.089

                      DCU 時間あたり

                      Dataplex Universal Catalog のメタデータと API の料金

                      説明

                      メタデータ ストレージの料金

                      Dataplex Universal Catalog では、保存されているメタデータの平均量が短い間隔で測定されますこのような測定値は料金請求を目的として 1 か月間の平均値にまとめられ、この平均値に月単位のレートが乗算されます。


                      料金(米ドル)

                      Dataplex Universal Catalog の無料枠

                      月間平均ストレージの最初の 1 MiB。

                      説明

                      無料

                      メタデータ ストレージ

                      1 MiB を超える月間平均ストレージ。

                      説明

                      Starting at

                      $2

                      1 GiB あたりの月額

                      API 料金

                      Dataplex Universal Catalog の料金は、Data Catalog API および Data Lineage API への API 呼び出しに対して発生します。

                      説明

                      API 呼び出し

                      毎月最初の 100 万回。

                      説明

                      無料

                      API 呼び出し

                      1 か月に 100 万回超

                      説明

                      Starting at

                      $10

                      API 呼び出し 100,000 回あたり

                      Dataplex Universal Catalog シャッフル ストレージの料金

                      説明

                      シャッフル ストレージの料金には、データ探索ワークベンチ用に構成された環境で指定されたディスク ストレージが含まれます。

                      料金(米ドル)

                      Starting at

                      $0.040

                      GB 単位 / 月

                      その他の使用状況

                      説明

                      Dataplex Universal Catalog のデータ編成機能(レイク、ゾーン、またはアセットのセットアップ)とセキュリティ ポリシーの適用および反映は、無料で提供されます。

                      料金(米ドル)

                      Dataplex Universal Catalog の一部の機能は、DataprocBigQueryDataflow を使用してジョブの実行をトリガーします。これらのサービスの使用量は、それぞれの料金モデルに従って課金され、料金はそれぞれのサービスの下に表示されます。

                      説明

                      料金の確認

                      リージョンごとの料金などについては、Dataplex Universal Catalog の料金ページをご覧ください。

                      カスタム見積もり

                      カスタム見積もりをご希望の場合は、Google のセールスチームにお問い合わせください。

                      概念実証を開始する

                      新規のお客様には、$300 分の無料クレジットを差し上げます

                      データ ガバナンスとは

                      Dataplex Universal Catalog の仕組み

                      Dataplex Universal Catalog のベスト プラクティス

                      レイクハウスのガバナンスの詳細

                      パートナーとインテグレーション

                      業界のリーダーと連携
                      • Accenture
                      • Confluent
                      • Collibra のロゴ
                      • hcl
                      • Informatica ロゴ
                      • NVIDIA ロゴ
                      • Starburst ロゴ
                      • tableau
                      • Accenture
                      • Confluent
                      • Collibra のロゴ
                      • hcl
                      • Informatica ロゴ
                      • NVIDIA ロゴ
                      • Starburst ロゴ
                      • tableau

                      Google Cloud パートナー センターですべてのパートナーを確認する。

                      Dataplex
                      • Google Cloud プロダクト
                      • 100 種類を超えるプロダクトをご用意しています。新規のお客様には、ワークロードの実行、テスト、デプロイができる無料クレジット $300 分を差し上げます。また、すべてのお客様に 25 以上のプロダクトを無料でご利用いただけます(毎月の使用量上限があります)。
                      Google Cloud