跳至
BigQuery 適用的 Datastream

BigQuery 適用的 Datastream

從關聯資料庫順暢地直接複製至 BigQuery,以提供近乎即時的營運資料深入分析資訊。

  • 可在 BigQuery 中,以低延遲的方式複製近乎即時的深入分析結果

  • 從 MySQL、PostgreSQL、AlloyDB、SQL Server 和 Oracle 資料庫存取串流資料

  • 自動調整資源配置、不須佈建或管理資源的無伺服器平台

  • 透過內建安全連線輕鬆設定 ELT (擷取、載入、轉換) 管道

  • 讓數千名客戶將營運資料複製到 BigQuery

優點

以最低延遲時間複製作業資料

直接將 MySQL、PostgreSQL、AlloyDB、SQL Server 和 Oracle 資料庫的內容順暢複製到 BigQuery,延遲時間短,也不會影響來源效能。

運用無伺服器架構擴充和縮減規模

採用可自動調整資源配置的無伺服器方法,讓您無須管理任何基礎架構,因此能減輕營運負擔。

只要幾分鐘就能快速上手

經過簡化的設定程序,只要幾個步驟就能開始將資料從作業資料庫複製到 BigQuery。

主要功能與特色

主要功能與特色

將作業資料複製到 BigQuery

Datastream 使用 BigQuery 的變更資料擷取 (CDC) 功能和 Storage Write API,以近乎即時的方式直接從來源系統複製更新。您不必再使用複製解決方案等有價值的資源處理繁雜的資料管道、自行管理測試環境資料表、複雜合併邏輯或手動資料類型轉換。

簡化設定

透過 Datastream,只要幾個步驟就能將資料複製到 BigQuery。只要在 BigQuery 中設定來源資料庫、連線類型和目的地,就大功告成。BigQuery 適用的 Datastream 會補充歷來資料,並在發生新的變更時持續複製。

串流關聯資料庫中的資料

Datastream 可以在最短的延遲時間內讀取 MySQL、PostgreSQL、AlloyDB、SQL Server 和 Oracle 資料庫中的所有變更 (插入、更新及刪除),並傳送至 BigQuery。來源資料庫可以託管於地端部署環境、Google Cloud 服務 (例如 Cloud SQLOracle 適用的 Bare Metal 解決方案),或是任何雲端的任意位置。這是專為 BigQuery 建構的無代理程式 Google 原生服務,可以穩定地即時串流每個事件。

結構定義偏移解決方法

隨著來源結構定義變更,Datastream 可以順暢地處理結構定義偏移,並將來源中新增的新資料欄和資料表自動複製到 BigQuery。

融入安全考量的設計

Datastream 支援多種安全的私人連線方法,可保護傳輸中的資料。靜態資料也都會經過加密處理。

Falabella 標誌
有了 Datastream,我們就能使用單一工具,將營運資料順暢、近乎即時地複製到 BigQuery。Datastream 幫助我們更快掌握營運資料的深入分析,提供更穩定的資料產品,並進一步滿足業務需求。

Falabella 資料解決方案部門主管 René Delgado

網誌連結

使用案例

使用案例

用途
將無伺服器資料複製到 BigQuery

Datastream 會從來源資料庫中讀取變更事件 (插入、更新和刪除),並近乎即時地將這類事件寫入 BigQuery 資料表中。如此一來,您就能用零售購買等交易資料來強化現有的 BigQuery 資料倉儲和機器學習模型,進而提供更完整的端對端資料。Datastream 會補充歷來資料,並持續在發生新的變更時複製,並順暢地處理結構定義變更。

將無伺服器資料複製到 BigQuery
比較功能與特色

比較從作業資料庫串流資料至 BigQuery 的選項

BigQuery 適用的 Datastream

可將資料從交易式資料庫複製到 BigQuery 的全代管解決方案

Datastream 和 Dataflow

可複製資料來源變更的自訂解決方案

Datastream 與 Data Fusion

無程式碼精靈,屬於全代管的 ETL 服務

主要優點

  • 將作業資料複製到 BigQuery 最簡單的方式

  • 可自動調整資源配置的無伺服器架構

  • 可讓您以端對端的方式檢視及監控複製管道的單一介面

  • 提供彈性的自訂解決方案

  • 由 Google 支援的各種目的地預先建立的範本

  • 整合資料品質和資料遮蓋等其他功能

  • ETL 開發人員和資料分析師專用的簡易介面

  • 事先找出複製作業的潛在問題和落差

  • 近乎即時的複製效能深入分析

可將資料從交易式資料庫複製到 BigQuery 的全代管解決方案

主要優點

  • 將作業資料複製到 BigQuery 最簡單的方式

  • 可自動調整資源配置的無伺服器架構

  • 可讓您以端對端的方式檢視及監控複製管道的單一介面

可複製資料來源變更的自訂解決方案

主要優點

  • 提供彈性的自訂解決方案

  • 由 Google 支援的各種目的地預先建立的範本

  • 整合資料品質和資料遮蓋等其他功能

無程式碼精靈,屬於全代管的 ETL 服務

主要優點

  • ETL 開發人員和資料分析師專用的簡易介面

  • 事先找出複製作業的潛在問題和落差

  • 近乎即時的複製效能深入分析

您還可以透過合作夥伴的 ETL/ELT 解決方案、Kafka 或批次工作,將作業資料庫中的資料串流至 BigQuery。與這些選項相比,Datastream 通常具備無伺服器架構、易於整合且低延遲的優勢。

定價

Datastream 定價

Datastream 的價格是根據實際處理的資料計算而得。我們提供以量計價的級別制價格,因此在遷移大量資料時較經濟實惠。其他定價詳細資料請參閱 Datastream 定價頁面。

BigQuery、Cloud Storage 和 Dataflow 等其他資源則會按照這些服務的定價收費。

展開下一步行動

運用價值 $300 美元的免費抵免額和超過 20 項一律免費的產品,開始在 Google Cloud 中建構產品與服務。

Google Cloud
  • ‪English‬
  • ‪Deutsch‬
  • ‪Español‬
  • ‪Español (Latinoamérica)‬
  • ‪Français‬
  • ‪Indonesia‬
  • ‪Italiano‬
  • ‪Português (Brasil)‬
  • ‪简体中文‬
  • ‪繁體中文‬
  • ‪日本語‬
  • ‪한국어‬
控制台
Google Cloud