跳至

BigLake

BigLake 是一個儲存引擎,提供整合式介面,可讓數據分析和 AI 引擎以安全、受管理且高效能的方式查詢多重格式、多雲端和多模組資料。建構單一副本 AI 湖倉,降低對自訂資料基礎架構的管理和需求。

  • Google 在 2024 年 SIGMOD 活動中發表的新研究「BigQuery's Evolution toward a Multi-Cloud Lakehouse」,持續推動創新。

  • 部署 Google 推薦的解決方案,整合資料湖泊和資料倉儲,輕鬆儲存、處理及分析結構化和非結構化資料

  • 使用數據分析與 AI,儲存結構化資料、非結構化資料及查詢的單一副本

  • 對分散式資料進行精細的存取權控管和多雲端管理

  • 開放格式的湖倉資料自動資料管理,提供全代管體驗

優點

自由選擇

無論資料儲存的位置和方式為何,您都能運用分散式資料進行數據分析,同時透過單一資料副本選擇最佳分析工具、開放原始碼或雲端原生服務。

效能優異的安全資料湖泊

提供 Apache Spark、Presto 和 Trino 等開放原始碼引擎的精細存取權控管機制,以及 Parquet 等開放格式。針對 BigQuery 支援的資料湖泊執行效能查詢。

大規模的統一控管與管理

Dataplex 相互整合,大規模提供管理服務,包括邏輯資料組織、集中式政策與中繼資料管理、品質與生命週期管理,以實現分散式資料一致性。

主要功能與特色

主要功能與特色

精細的安全性控管機制

使用 BigLake,就不必為使用者授予檔案層級存取權。您可以對與現有 BigQuery 資料表類似的物件儲存資料表,套用資料表、資料列、資料欄層級的安全性政策。

多運算分析

維護單一結構化與非結構化資料副本,並透過 Google Cloud 和開放原始碼引擎 (包括 BigQueryVertex AIDataflow、Spark、Presto、Trino 和 Hive),使用 BigLake 連接器統一存取資料。在單一平台中集中管理資安政策,並透過連接器內建的 API 介面,在查詢引擎中持續強制執行政策。

多雲端管理

探索所有 BigLake 資料表,包括在 Data Catalog 中透過 Amazon S3、Azure Data Lake Gen2 定義的表格。設定精細的存取權控管,並在透過 BigQuery Omni 查詢時,跨雲端強制實行此設定。

專為人工智慧 (AI) 打造

物件資料表可讓受管理的 AI 工作負載使用多模組資料。使用 BigQuery SQL 及其 Vertex AI 整合功能,輕鬆建構 AI 用途。

以開放格式為基礎打造

支援開放式資料表和檔案格式,包括 Parquet、Avro、ORC、CSV、JSON。這個 API 透過 Apache Arrow 提供多個運算引擎。資料表格式透過資訊清單原生支援 Apache Iceberg、Delta 和 Hudi。

bol.com 標誌
做為一家快速成長的電子商務公司,我們發現資料也隨之快速增加。BigLake 讓我們在檢視畫面上啟用存取權控管,同時為我們的使用者提供整合式介面,方便我們維持低資料儲存空間成本,進而發揮資料湖泊的價值。如此一來,我們的使用者就能更快地分析資料集。

說明文件

說明文件

Google Cloud Basics

BigLake 簡介

BigLake 概念簡介,瞭解如何簡化分析體驗。
Quickstart

開始使用 BigLake

瞭解如何建立和管理 BigLake 資料表,以及如何使用連接器透過 BigQuery 或其他開放原始碼引擎查詢 BigLake 資料表。
Quickstart

查詢 BigLake 資料表中的 Cloud Storage 資料

瞭解如何查詢儲存在 Cloud Storage BigLake 資料表中的資料。

找不到所需資訊嗎?

定價

定價

BigLake 會依據 BigLake 資料表的查詢作業來計價,包括:

1. BigQuery 定價適用於在 Google Cloud Storage 中定義的 BigLake 資料表查詢。

2. BigQuery Omni 定價適用於在 Amazon S3 和 Azure Data Lake Gen 2 中定義的 BigLake 資料表查詢。

3. 使用 BigLake 連接器的開放原始碼引擎查詢:BigLake 連接器使用 BigQuery Storage API,且適用相應的定價 - 根據讀取的位元組數和輸出計費。

4. 如使用中繼資料快取物件資料表BigLake Metastore 加速查詢,系統將收取額外費用。

例如:* 每個月可免費使用 BigQuery 處理 1 TB 的資料。

展開下一步行動

運用價值 $300 美元的免費抵免額和超過 20 項一律免費的產品,開始在 Google Cloud 中建構產品與服務。

Google Cloud
  • ‪English‬
  • ‪Deutsch‬
  • ‪Español‬
  • ‪Español (Latinoamérica)‬
  • ‪Français‬
  • ‪Indonesia‬
  • ‪Italiano‬
  • ‪Português (Brasil)‬
  • ‪简体中文‬
  • ‪繁體中文‬
  • ‪日本語‬
  • ‪한국어‬
控制台