Knowledge Catalog (舊稱 Dataplex) 定價

Dataplex Universal Catalog 已演進為 Knowledge Catalog。定價 SKU 的名稱仍為 Dataplex。Dataplex 定價採即付即用制,用多少付多少。Dataplex 目前根據下列 SKU 收費:

  • Dataplex Universal Catalog 處理作業 (標準級和進階級)
  • 中繼資料儲存空間

以下概略說明 Dataplex Universal Catalog 各項主要功能的計費方式:

功能

Cloud Storage 中繼資料收集

標準

不適用

資料歷程

進階

有

資料品質

進階

是 - 如果已發布至目錄

剖析資料

進階

是 - 如果已發布至目錄

在 Dataplex Universal Catalog 擴充中繼資料

不適用

有

Dataplex 的 Gemini 輔助功能 (包括資料洞察和自動中繼資料生成功能) 會計入 Gemini in BigQuery 或 Gemini Code Assist 的費用。

其他使用方式

Knowledge Catalog 的資料整理功能 (湖泊、可用區或資產設定) 和安全性政策套用及傳播功能皆為無須支付費用。

此外,部分 Knowledge Catalog 功能 (包括探索掃描、排定的資料品質和資料擷取工作,以及從 CloudSQL 和 Looker 擷取中繼資料的代管連接器) 會使用 GCS、Managed Service for Apache Spark、BigQuery、Dataflow 和 Cloud Scheduler 觸發工作執行作業。這些用量會分別依據 GCS、Managed Service for Apache Spark、BigQuery、Dataflow 和 Cloud Scheduler 定價模式計費,費用會顯示在 GCS、Managed Service for Apache Spark、BigQuery 和 Dataflow 下,而非 Dataplex Universal Catalog。

Knowledge Catalog 的 Dataplex Universal Catalog 處理作業定價

標準級和進階級 Dataplex Universal Catalog 處理作業皆按資料運算單元 (DCU) 計量收費。Dataplex Universal Catalog 的基本計費單位為 DCU 時數,實際用量和費用計算方式則視您使用的個別功能而定。

Knowledge Catalog 的 Dataplex Universal Catalog 標準處理作業定價

標準級 Dataplex Universal Catalog 支援資料探索功能,可探索 Dataplex Universal Catalog 代管資料的中繼資料。以下是您所選區域的價格。

  • Johannesburg (africa-south1)
  • Taiwan (asia-east1)
  • Hong Kong (asia-east2)
  • Tokyo (asia-northeast1)
  • Osaka (asia-northeast2)
  • Seoul (asia-northeast3)
  • Mumbai (asia-south1)
  • Singapore (asia-southeast1)
  • Jakarta (asia-southeast2)
  • Bangkok (asia-southeast3)
  • Kuala Lumpur (asia-southeast4)
  • Sydney (australia-southeast1)
  • Melbourne (australia-southeast2)
  • Warsaw (europe-central2)
  • Finland (europe-north1)
  • Stockholm (europe-north2)
  • Madrid (europe-southwest1)
  • Belgium (europe-west1)
  • Berlin (europe-west10)
  • Turin (europe-west12)
  • London (europe-west2)
  • Frankfurt (europe-west3)
  • Netherlands (europe-west4)
  • Zurich (europe-west6)
  • Milan (europe-west8)
  • Paris (europe-west9)
  • Doha (me-central1)
  • Dammam (me-central2)
  • Tel Aviv (me-west1)
  • Montreal (northamerica-northeast1)
  • Toronto (northamerica-northeast2)
  • Mexico (northamerica-south1)
  • Sao Paulo (southamerica-east1)
  • Santiago (southamerica-west1)
  • Iowa (us-central1)
  • Oklahoma (us-central2)
  • South Carolina (us-east1)
  • Northern Virginia (us-east4)
  • Columbus (us-east5)
  • Dallas (us-south1)
  • Oregon (us-west1)
  • Los Angeles (us-west2)
  • Salt Lake City (us-west3)
  • Las Vegas (us-west4)
顯示折扣選項
項目

計量器

價格 (美元)

* (USD)
BigQuery CUD - 1 Year* (USD)
BigQuery CUD - 3 Year* (USD)

Dataplex 處理作業

每 DCU 每單位時間

US$0.06US$0.054US$0.048
* 每個計費模式都有專屬 ID。您可能需要啟用相關設定,才能享有計費模式折扣。按這裡瞭解詳情。

Knowledge Catalog 的 Dataplex Universal Catalog 免費方案

在 Google Cloud 免費方案下,Knowledge Catalog 的部分資源在一定限度內可供使用者無須支付費用使用。在免費試用期間或試用期結束後,您在相關用量限制內皆可免費使用特定資源。如果您的用量超過這些用量限制,且已不在免費試用期內,系統會按照上述各節說明的定價向您收費。

注意:Knowledge Catalog 免費方案僅適用於 Dataplex Universal Catalog 標準處理 SKU,不適用於 Dataplex Universal Catalog 進階處理 SKU。

資源

每月免費用量限制

Dataplex Universal Catalog 處理作業

100 DCU 時數

Knowledge Catalog 的 Dataplex Universal Catalog 進階處理作業定價

進階級 Dataplex 處理作業涵蓋資料歷程、資料品質和資料剖析。

  • Johannesburg (africa-south1)
  • Taiwan (asia-east1)
  • Hong Kong (asia-east2)
  • Tokyo (asia-northeast1)
  • Osaka (asia-northeast2)
  • Seoul (asia-northeast3)
  • Mumbai (asia-south1)
  • Delhi (asia-south2)
  • Singapore (asia-southeast1)
  • Jakarta (asia-southeast2)
  • Bangkok (asia-southeast3)
  • Kuala Lumpur (asia-southeast4)
  • Sydney (australia-southeast1)
  • Melbourne (australia-southeast2)
  • Warsaw (europe-central2)
  • Finland (europe-north1)
  • Stockholm (europe-north2)
  • Madrid (europe-southwest1)
  • Belgium (europe-west1)
  • Berlin (europe-west10)
  • Turin (europe-west12)
  • London (europe-west2)
  • Frankfurt (europe-west3)
  • Netherlands (europe-west4)
  • Zurich (europe-west6)
  • Milan (europe-west8)
  • Paris (europe-west9)
  • Doha (me-central1)
  • Dammam (me-central2)
  • Tel Aviv (me-west1)
  • Montreal (northamerica-northeast1)
  • Toronto (northamerica-northeast2)
  • Mexico (northamerica-south1)
  • Sao Paulo (southamerica-east1)
  • Santiago (southamerica-west1)
  • Iowa (us-central1)
  • Oklahoma (us-central2)
  • South Carolina (us-east1)
  • Northern Virginia (us-east4)
  • Columbus (us-east5)
  • Alabama (us-east7)
  • Dallas (us-south1)
  • Oregon (us-west1)
  • Los Angeles (us-west2)
  • Salt Lake City (us-west3)
  • Las Vegas (us-west4)
  • Phoenix (us-west8)
顯示折扣選項
項目

計量器

價格* (美元)

(USD)
BigQuery CUD - 1 Year* (USD)
BigQuery CUD - 3 Year* (USD)

Dataplex 進階處理作業定價

每 DCU 每單位時間

US$0.089US$0.0801US$0.0712
* 每個計費模式都有專屬 ID。您可能需要啟用相關設定,才能享有計費模式折扣。按這裡瞭解詳情。

DCU 費用計算方式

各項功能的 DCU 費用計算方式如下:

1. 自動資料品質掃描:

  • DCU 小時用量與剖析資料和計算資料品質指標所涉及的處理作業成正比。以秒計費,至少會產生一分鐘的基本費用。
  • 費用取決於資料列數、資料欄數、掃描的資料量、資料品質規則設定、資料表的資料分割和分群設定,以及掃描頻率。
  • 資料品質異常偵測掃描不會產生 DCU 費用。而是適用於運算、儲存空間和 BQML 模型訓練、處理和部署的標準 BigQuery 定價。
  • 使用自訂執行身分會改變掃描作業的計費方式。指定自訂執行身分後,掃描作業產生的運算和儲存費用會直接計入 BigQuery 專案,不會透過標準 Dataplex 進階 SKU 計費。

2. 您可以透過下列幾種方式,降低自動資料品質掃描作業的費用:

3. 如要篩選匯總費用,請使用 BigQuery 帳單匯出功能中的下列標籤:

  • goog-dataplex-datascan-data-source-dataplex-entity
  • goog-dataplex-datascan-data-source-dataplex-lake
  • goog-dataplex-datascan-data-source-dataplex-zone
  • goog-dataplex-datascan-data-source-project
  • goog-dataplex-datascan-data-source-region
  • goog-dataplex-datascan-id
  • goog-dataplex-datascan-job-id

4. 資料剖析掃描:

  • DCU 小時用量與剖析資料和計算資料品質指標所涉及的處理作業成正比。以秒計費,至少會產生一分鐘的基本費用。
  • 費用取決於資料列數、資料欄數、掃描的資料量、資料表的資料分割和分群設定,以及掃描頻率。
  • 使用自訂執行身分會改變掃描作業的計費方式。指定自訂執行身分後,掃描作業產生的運算和儲存費用會直接計入 BigQuery 專案,不會透過標準 Dataplex 進階 SKU 計費。

5. 您可以透過下列幾種方式,降低資料剖析掃描作業的費用:

  • 取樣
  • 增量掃描
  • 資料欄篩選
  • 資料列篩選
  • 如要將資料剖析費用與 Dataplex 進階處理 SKU 中的其他費用分開,請在 Cloud Billing 帳單報表中使用標籤 goog-dataplex-workload-type,並將值設為 DATA_PROFILE。

6. 如要篩選匯總費用,請使用 BigQuery 帳單匯出功能中的下列標籤:

  • goog-dataplex-datascan-data-source-dataplex-entity
  • goog-dataplex-datascan-data-source-dataplex-lake
  • goog-dataplex-datascan-data-source-dataplex-zone
  • goog-dataplex-datascan-data-source-project
  • goog-dataplex-datascan-data-source-region
  • goog-dataplex-datascan-id
  • goog-dataplex-datascan-job-id

資料歷程定價

您需要支付支援的 Google Cloud 系統自動回報歷程所耗用的運算資源費用。費用會顯示在您執行工作的專案中。

如要將資料歷程費用與 Dataplex 付費處理 SKU 中的其他費用分開,請在 Cloud Billing 帳單報表中使用值為 LINEAGE 的標籤 goog-dataplex-workload-type。

可計費和不可計費的用量

下列活動會產生費用:

  • 自動剖析歷程:根據處理複雜度,耗用資料運算單元 (DCU) 時數。DCU 測量的是分配用於剖析的抽象運算能力。用量是根據工作數量、工作執行次數和建立的歷程連結數量計算。

如果 Data Lineage API Origin sourceType 設為 CUSTOM 以外的值,就會產生這些費用。BIGQUERY、DATAPROC 或 COMPOSER 等值表示 Google Cloud 會自動從服務的記錄和中繼資料中擷取歷程。這項擷取程序需要運算資源 (DCU),因此會產生費用。相較之下,CUSTOM 表示您已自行剖析,且只儲存結果,這項功能不收費。

以下活動免費:

  • 自訂歷程報告:回報第三方系統或自訂整合服務 (sourceType 為 CUSTOM) 的歷程,不需付費。包括下列方法:
  • 呼叫 ProcessOpenLineageRunEvent,即可匯入與 OpenLineage 相容的事件。
  • 使用自訂用戶端建立 LineageEvent,手動回報原生歷程事件。
  • 報告程序和執行作業:報告程序中繼資料本身不收費,只有自動剖析 LineageEvents 時才會產生費用。
  • 歷程使用量:擷取歷程 (使用 Get 或 List 方法) 和刪除歷程 (使用 Delete 方法) 皆不收費。

計費示例

在這個範例中,您會啟用資料歷程,追蹤專案中 BigQuery 的歷程。專案位於 us-central1,每 DCU 小時的費用為 $0.089 美元。

回報單一 EntityReference 的歷程,或回報來自單一 EntityReference 的歷程,費用約為 0.0056 DCU 小時。EntityReference 可在 Google Cloud 中,不重複識別資料資源,例如 BigQuery 資料表或 Cloud Storage bucket。

  • 每日工作:您每天執行下列 BigQuery 工作一次,為期 30 天:

CREATE TABLE tableB1 AS SELECT * FROM tableA JOIN tableC USING (column);

結果:這項作業會產生歷程連結,將兩個來源資料表連結至一個目標資料表 (3 個不同的實體)。

  • 每隔一天執行的工作:您每隔一天執行下列工作 (每月 15 次):

CREATE TABLE tableB2 AS SELECT * FROM tableA, tableC, tableD;

結果:這項作業會產生歷程連結,將三個來源資料表連結至一個目標資料表 (4 個不同的實體)。

費用計算

假設這個月產生了 1 GiB 的資料歷程中繼資料。費用計算方式如下:

  • 每日工作:30 天 * 3 個實體 * 約 0.0056 個 DCU 小時 * $0.089 美元= 約 $0.045 美元
  • 每隔一天執行的工作:15 天 * 4 個實體 * 0.0056 DCU 小時 * $0.089 = $0.030
  • 儲存空間:(1 GiB - 1 MiB 免費方案) * $2.00 = $1.998

總計:約$0.045 美元 + $0.030 美元 + $1.998 美元 = 約$2.07 美元

設計階段歷程定價 (Looker Core)

Looker 的歷程是設計階段歷程:Knowledge Catalog 會從模型定義 (例如 LookML 檢視表和探索,以及參照的 BigQuery 資料表) 衍生,而非從工作執行作業衍生。設計階段歷程與自動歷程剖析功能,共用相同的 Dataplex 進階處理 SKU,但 DCU 時數用量的計算方式不同:

  • 首次回報歷程連結或程序,以及每次變更 (例如修改並重新發布 Looker 模型) 時,都會產生費用。設計階段歷程沒有執行作業,因此不會產生單次事件費用,這點與上述以事件為基礎的歷程處理作業類似。
  • 回報單一節點的歷程,費用約為 0.0325 DCU 小時 (在 us-central1 區域約為 $0.0029 美元,每 DCU 小時費用為 $0.089 美元)。
  • 擷取及刪除歷程仍為免費。歷程中繼資料會依中繼資料儲存空間 SKU 另外計費。

2027 年 3 月 1 日起,Looker Core 設計階段歷程處理功能將開始計費。在該日期前,Looker 回報的歷程資訊無須支付費用。如要停用這項功能,請參閱 https://docs.cloud.google.com/dataplex/docs/control-lineage-ingestion,瞭解如何啟用或停用 Looker Core 歷程處理功能。

Knowledge Catalog (Dataplex Universal Catalog) 中繼資料儲存空間定價

中繼資料儲存空間定價

Knowledge Catalog 會依據中繼資料儲存空間 SKU 收取中繼資料儲存費用。中繼資料儲存空間的計算單位是 GiB,1 GiB 為 1,073,741,824 位元組。Knowledge Catalog 會測量在一小段時間中的平均中繼資料儲存量。我們會匯總這些數據,算出一個月的平均值,再將這個平均值乘以每月費率,以此計費。

注意:從 Google Cloud 服務 (例如 BigQuery) 自動擷取的技術中繼資料,其儲存空間不收費。

如果您使用美元以外的貨幣付費,系統將按照 Cloud Platform SKU 頁面上列出的相應貨幣價格來計費。

Knowledge Catalog 儲存空間定價

中繼資料儲存空間費用 (包括項目和面向的費用) 會計入建立相關資源的專案。

每月平均儲存空間

價格 (美元)

不限

US$0.002739726 / 1 gibibyte hour

Knowledge Catalog 的 Dataplex Universal Catalog API 費用

使用者與 Knowledge Catalog 互動時,下列 API 呼叫無須支付費用:

  • 建立及管理 Dataplex Universal Catalog 資源
  • 建立及管理歷程資源
  • 目錄搜尋

計費示例

本節提供 Dataplex Universal Catalog 費用的計算範例。

小切面

  • 使用者 A 建立並套用小型切面 (每個 1024 位元組)。使用者每月支付 $10 美元,即可儲存 5 GiB 的中繼資料,相當於約 500 萬個面向。假設每個資料表有一個面向,則總共有 500 萬個資料表具有面向。
  • 使用者 B 在當月 10 日建立 500 萬個面向,每個面向的大小為 1 KB,並在 20 日刪除這些面向。費用為 $3.33 美元,計算方式為 5 GiB 的資料除以三分之一個月:
  • 範例
載入中…

大型 aspect

  • 使用者 C 建立並套用大型自訂標記 (每個 10 KB)。使用者每月支付 $10 美元,即可儲存 5 GiB 的中繼資料,相當於約 50 萬個面向。假設每個資料表有一個面向,則總共有 50 萬個資料表具有面向。
  • 使用者 D 建立 1 萬個切面類型 (例如 ETL、資料治理、資料品質),並使用這 10 個切面類型,分別套用大型切面 (每個 10 KB)。使用者每月支付 $10 美元,即可儲存 5 GiB 的中繼資料,相當於約 50 萬個面向。假設每個資料表有 10 個面向,則總共有 5 萬個資料表。

後續步驟

索取客製化報價

Google Cloud 提供「即付即用」計費模式,您只需要為所用服務付費。貴機構如需索取客製化的報價,請與我們的銷售團隊聯絡。