Knowledge Catalog (이전 명칭: Dataplex) 가격 책정

Dataplex Universal Catalog가 Knowledge Catalog로 발전했습니다. 가격 책정 SKU는 Dataplex라는 이름으로 유지됩니다. Dataplex 가격은 사용한 만큼만 지불하는 방식을 기준으로 책정됩니다. 현재 Dataplex는 다음 SKU를 기준으로 요금을 청구합니다.

  • Dataplex Universal Catalog 처리 (Standard 및 Premium)
  • 메타데이터 스토리지

다음은 각 주요 Dataplex Universal Catalog 기능의 청구 방식에 대한 개략적인 개요입니다.

기능

Cloud Storage 메타데이터 수집

표준

해당 사항 없음

데이터 계보

프리미엄

데이터 품질

프리미엄

예 - 카탈로그에 게시된 경우

데이터 프로파일링

프리미엄

예 - 카탈로그에 게시된 경우

Dataplex Universal Catalog에서 메타데이터 보강

해당 사항 없음

데이터 인사이트 및 자동 메타데이터 생성 기능을 포함한 Dataplex의 Gemini 기반 기능은 BigQuery의 Gemini 또는 Gemini Code Assist의 일부로 청구됩니다.

기타 용도

Knowledge Catalog의 데이터 구성 기능(레이크, 영역 또는 애셋 설정)과 보안 정책 적용 및 전파는 무료로 제공됩니다.

또한 일부 Knowledge Catalog 기능 (검색 스캔, 예약된 데이터 품질 및 데이터 수집 작업, CloudSQL 및 Looker에서 메타데이터를 수집하기 위한 관리형 커넥터 포함)은 GCS, Managed Service for Apache Spark, BigQuery, Dataflow, Cloud Scheduler를 사용하여 작업 실행을 트리거합니다. 이러한 사용량은 각각 GCSManaged Service for Apache Spark, BigQuery, Dataflow, Cloud Scheduler 가격 책정 모델에 따라 청구되며, 요금은 Dataplex Universal Catalog가 아닌 GCS, Managed Service for Apache Spark, BigQuery, Dataflow에 표시됩니다.

Knowledge Catalog의 Dataplex Universal Catalog 처리 가격 책정

Dataplex Universal Catalog 표준 및 프리미엄 처리는 데이터 컴퓨팅 단위(DCU)로 측정됩니다. DCU 시간당은 Dataplex Universal Catalog의 추상적인 청구 단위이며 실제 측정은 사용하는 개별 기능에 따라 다릅니다.

Knowledge Catalog의 Dataplex Universal Catalog 표준 처리 가격 책정

Dataplex Universal Catalog 표준 등급은 Dataplex Universal Catalog 관리 데이터 전반에서 메타데이터를 탐색하는 데이터 탐색 기능을 제공합니다. 다음은 선택한 리전의 가격입니다.

  • Johannesburg (africa-south1)
  • Taiwan (asia-east1)
  • Hong Kong (asia-east2)
  • Tokyo (asia-northeast1)
  • Osaka (asia-northeast2)
  • Seoul (asia-northeast3)
  • Mumbai (asia-south1)
  • Singapore (asia-southeast1)
  • Jakarta (asia-southeast2)
  • Bangkok (asia-southeast3)
  • Sydney (australia-southeast1)
  • Melbourne (australia-southeast2)
  • Warsaw (europe-central2)
  • Finland (europe-north1)
  • Stockholm (europe-north2)
  • Madrid (europe-southwest1)
  • Belgium (europe-west1)
  • Berlin (europe-west10)
  • Turin (europe-west12)
  • London (europe-west2)
  • Frankfurt (europe-west3)
  • Netherlands (europe-west4)
  • Zurich (europe-west6)
  • Milan (europe-west8)
  • Paris (europe-west9)
  • Doha (me-central1)
  • Dammam (me-central2)
  • Tel Aviv (me-west1)
  • Montreal (northamerica-northeast1)
  • Toronto (northamerica-northeast2)
  • Mexico (northamerica-south1)
  • Sao Paulo (southamerica-east1)
  • Santiago (southamerica-west1)
  • Iowa (us-central1)
  • Oklahoma (us-central2)
  • South Carolina (us-east1)
  • Northern Virginia (us-east4)
  • Columbus (us-east5)
  • Dallas (us-south1)
  • Oregon (us-west1)
  • Los Angeles (us-west2)
  • Salt Lake City (us-west3)
  • Las Vegas (us-west4)
할인 옵션 표시
항목

측정기

Default* (USD)
BigQuery CUD - 1 Year* (USD)
BigQuery CUD - 3 Year* (USD)

Dataplex 처리

단위 시간당 DCU당

US$0.06US$0.054US$0.048
* 각 소비 모델에는 고유 ID가 있습니다. 소비 모델 할인을 받으려면 선택해야 할 수 있습니다. 자세히 알아보려면 여기를 클릭하세요.

Knowledge Catalog용 Dataplex Universal Catalog 무료 등급

Google Cloud 무료 등급 혜택 중 하나로 Knowledge Catalog의 일부 리소스를 특정 한도까지 무료로 사용할 수 있습니다. 무료 사용량은 무료 체험 기간 및 그 이후에도 사용할 수 있습니다. 이 사용 한도를 소진했고 무료 평가판 사용 기간이 종료된 경우 위의 섹션에 설명된 가격 책정에 따라 요금이 청구됩니다.

참고: Knowledge Catalog 무료 등급은 Dataplex Universal Catalog Standard Processing SKU에서만 사용할 수 있으며 Dataplex Universal Catalog Premium Processing SKU에서는 사용할 수 없습니다.

리소스

월별 무료 사용량 한도

Dataplex Universal Catalog 처리

100 DCU-시간

Knowledge Catalog용 Dataplex Universal Catalog 프리미엄 처리 가격 책정

Dataplex 프리미엄 처리 등급에는 데이터 계보, 데이터 품질, 데이터 프로파일링이 포함됩니다.

  • Johannesburg (africa-south1)
  • Taiwan (asia-east1)
  • Hong Kong (asia-east2)
  • Tokyo (asia-northeast1)
  • Osaka (asia-northeast2)
  • Seoul (asia-northeast3)
  • Mumbai (asia-south1)
  • Delhi (asia-south2)
  • Singapore (asia-southeast1)
  • Jakarta (asia-southeast2)
  • Bangkok (asia-southeast3)
  • Sydney (australia-southeast1)
  • Melbourne (australia-southeast2)
  • Warsaw (europe-central2)
  • Finland (europe-north1)
  • Stockholm (europe-north2)
  • Madrid (europe-southwest1)
  • Belgium (europe-west1)
  • Berlin (europe-west10)
  • Turin (europe-west12)
  • London (europe-west2)
  • Frankfurt (europe-west3)
  • Netherlands (europe-west4)
  • Zurich (europe-west6)
  • Milan (europe-west8)
  • Paris (europe-west9)
  • Doha (me-central1)
  • Dammam (me-central2)
  • Tel Aviv (me-west1)
  • Montreal (northamerica-northeast1)
  • Toronto (northamerica-northeast2)
  • Mexico (northamerica-south1)
  • Sao Paulo (southamerica-east1)
  • Santiago (southamerica-west1)
  • Iowa (us-central1)
  • Oklahoma (us-central2)
  • South Carolina (us-east1)
  • Northern Virginia (us-east4)
  • Columbus (us-east5)
  • Alabama (us-east7)
  • Dallas (us-south1)
  • Oregon (us-west1)
  • Los Angeles (us-west2)
  • Salt Lake City (us-west3)
  • Las Vegas (us-west4)
  • Phoenix (us-west8)
할인 옵션 표시
항목

측정기

Default* (USD)
BigQuery CUD - 1 Year* (USD)
BigQuery CUD - 3 Year* (USD)

Dataplex 프리미엄 처리 가격 책정

단위 시간당 DCU당

US$0.089US$0.0801US$0.0712
* 각 소비 모델에는 고유 ID가 있습니다. 소비 모델 할인을 받으려면 선택해야 할 수 있습니다. 자세히 알아보려면 여기를 클릭하세요.

DCU 요금 계산

각 기능에 대한 DCU 요금은 다음과 같이 계산됩니다.

1. 자동 데이터 품질 스캔:

  • DCU 시간 소비는 데이터 프로파일링 및 데이터 품질 측정항목 계산에 관련된 처리량에 비례합니다. 초 단위로 요금이 청구되며 최소 사용 기준은 1분입니다.
  • 요금은 행 수, 열 수, 스캔한 데이터 양, 데이터 품질 규칙 구성, 테이블의 파티션 나누기 및 클러스터링 설정, 스캔 빈도에 따라 달라집니다.
  • 데이터 품질 이상 감지 스캔에는 DCU 요금이 적용되지 않습니다. 대신 컴퓨팅, 스토리지, BQML 모델 학습, 처리, 배포에 표준 BigQuery 가격 책정이 적용됩니다.
  • 커스텀 실행 ID를 사용하면 스캔 요금이 청구되는 방식이 변경됩니다. 커스텀 실행 ID를 지정하면 스캔과 관련된 컴퓨팅 및 스토리지 비용이 표준 Dataplex Premium SKU를 우회하여 BigQuery 프로젝트에 직접 청구됩니다.

2. 자동 데이터 품질 스캔 비용을 줄일 수 있는 다음과 같은 몇 가지 옵션이 있습니다.

3. 집계 요금을 필터링하려면 BigQuery의 청구 내보내기에서 다음 라벨을 사용합니다.

  • goog-dataplex-datascan-data-source-dataplex-entity
  • goog-dataplex-datascan-data-source-dataplex-lake
  • goog-dataplex-datascan-data-source-dataplex-zone
  • goog-dataplex-datascan-data-source-project
  • goog-dataplex-datascan-data-source-region
  • goog-dataplex-datascan-id
  • goog-dataplex-datascan-job-id

4. 데이터 프로파일링 스캔:

  • DCU 시간 소비는 데이터 프로파일링 및 데이터 품질 측정항목 계산에 관련된 처리량에 비례합니다. 초 단위로 요금이 청구되며 최소 사용 기준은 1분입니다.
  • 요금은 행 수, 열 수, 스캔되는 데이터 양, 테이블의 파티션 나누기 및 클러스터링 설정, 스캔 빈도에 따라 달라집니다.
  • 커스텀 실행 ID를 사용하면 스캔 요금이 청구되는 방식이 변경됩니다. 커스텀 실행 ID를 지정하면 스캔과 관련된 컴퓨팅 및 스토리지 비용이 표준 Dataplex Premium SKU를 우회하여 BigQuery 프로젝트에 직접 청구됩니다.

5. 데이터 프로파일링 스캔 비용을 줄일 수 있는 다음과 같은 몇 가지 옵션이 있습니다.

  • 샘플링
  • 증분 스캔
  • 열 필터링
  • 행 필터링
  • 데이터 프로파일링 요금을 Dataplex 프리미엄 처리 SKU의 다른 요금과 구분하려면 Cloud Billing 보고서에서 goog-dataplex-workload-type 라벨에 DATA_PROFILE 값을 사용합니다.

6. 집계 요금을 필터링하려면 BigQuery의 청구 내보내기에서 다음 라벨을 사용합니다.

  • goog-dataplex-datascan-data-source-dataplex-entity
  • goog-dataplex-datascan-data-source-dataplex-lake
  • goog-dataplex-datascan-data-source-dataplex-zone
  • goog-dataplex-datascan-data-source-project
  • goog-dataplex-datascan-data-source-region
  • goog-dataplex-datascan-id
  • goog-dataplex-datascan-job-id

데이터 계보 가격 책정

지원되는 Google Cloud 시스템의 자동 계보 보고에서 소비되는 컴퓨팅 성능에 대해 요금을 지불합니다. 결제는 작업을 실행한 프로젝트에 표시됩니다.

데이터 계보 요금을 Dataplex 프리미엄 처리 SKU의 다른 요금과 구분하려면 Cloud Billing 보고서에서 goog-dataplex-workload-type 라벨에 LINEAGE 값을 사용합니다.

청구 가능 및 청구 불가능한 사용량

다음 활동에는 요금이 청구됩니다.

  • 자동 계보 파싱: 처리 복잡성에 따라 데이터 컴퓨팅 단위 (DCU) 시간을 소비합니다. DCU는 파싱을 수행하기 위해 할당된 추상적인 컴퓨팅 용량을 측정합니다. 소비량은 작업 수, 작업 실행 수, 생성된 계보 링크 수를 기준으로 계산됩니다. 

Data Lineage API Origin sourceType가 CUSTOM 이외의 값으로 설정된 경우 이러한 비용이 발생합니다. BIGQUERY, DATAPROC 또는 COMPOSER와 같은 값은 계보가 서비스의 로그 및 메타데이터에서 Google Cloud에 의해 자동으로 추출되고 있음을 나타냅니다. 이 추출 프로세스에는 컴퓨팅 리소스 (DCU)가 필요하므로 요금이 청구됩니다. 반면 CUSTOM은 사용자가 직접 파싱을 수행하고 결과만 저장하고 있음을 나타내며, 이 경우 무료입니다.

다음 활동은 무료입니다.

  • 커스텀 계보 보고: 서드 파티 시스템 또는 커스텀 통합 (sourceType이 CUSTOM인 경우)의 계보 보고는 무료입니다. 여기에는 다음 메서드가 포함됩니다.
  • OpenLineage 호환 이벤트를 가져올 수 있는 ProcessOpenLineageRunEvent 호출
  • 커스텀 클라이언트를 사용하여 LineageEvent를 만들어 기본 계보 이벤트를 수동으로 보고합니다.
  • 보고 프로세스 및 실행: 프로세스 메타데이터 자체를 보고하는 것은 무료이며, LineageEvent의 자동 파싱에만 요금이 부과됩니다.
  • 계보 소비: 계보 검색 (Get 또는 List 메서드 사용) 및 계보 삭제 (Delete 메서드 사용)는 무료입니다.

가격 책정 예시

이 예에서는 데이터 계보를 사용 설정하여 프로젝트의 BigQuery 계보를 추적합니다. 프로젝트는 us-central1 위치에 있으며, DCU 시간당 비용은 $0.089입니다.

하나의 EntityReference에 대한 계보를 보고하거나 계보를 보고받는 데는 약 0.0056 DCU-시간이 소요됩니다. EntityReference는 BigQuery 테이블 또는 Cloud Storage 버킷과 같은 Google Cloud 내의 데이터 리소스를 고유하게 식별합니다.

  • 일일 작업: 30일 동안 하루에 한 번 다음 BigQuery 작업을 실행합니다.

CREATE TABLE tableB1 AS SELECT * FROM tableA JOIN tableC USING (column);

결과: 이 작업은 두 개의 소스 테이블을 하나의 타겟 테이블에 연결하는 계보 링크를 생성합니다 (3개의 고유한 항목).

  • 격일 작업: 격일로 다음 작업을 실행합니다 (한 달에 15회).

CREATE TABLE tableB2 AS SELECT * FROM tableA, tableC, tableD;

결과: 이 작업은 3개의 소스 테이블을 1개의 타겟 테이블 (4개의 고유한 항목)에 연결하는 계보 링크를 생성합니다.

비용 계산

이번 달에는 1GiB의 데이터 계보 메타데이터가 생성되었다고 가정해 보겠습니다. 비용은 다음과 같이 계산됩니다.

  • 일일 작업: 30일 * 3개 항목 * ~0.0056 DCU 시간 * $0.089 ~= $0.045
  • 격일 작업: 15일 * 4개 항목 * 0.0056 DCU-시간 * $0.089 = $0.030
  • 스토리지: (1GiB - 1MiB 무료 등급) * $2.00 = $1.998

합계: ~$0.045 + $0.030 + $1.998 = ~$2.07

Knowledge Catalog (Dataplex Universal Catalog) 메타데이터 스토리지 가격 책정

메타데이터 스토리지 가격 책정

Knowledge Catalog는 메타데이터 스토리지 SKU를 사용하여 메타데이터 스토리지 비용을 청구합니다. 메타데이터 스토리지는 기비바이트 (GiB) 단위로 측정되며, 1GiB는 1,073,741,824바이트입니다. Knowledge Catalog는 짧은 시간 동안의 평균 저장된 메타데이터 양을 측정합니다. 이러한 측정 값을 합해 한 달 동안의 평균을 낸 후 이 평균 값에 월별 요율을 곱하여 청구 금액을 계산합니다.

참고: BigQuery와 같은 Google Cloud 서비스에서 자동으로 수집된 기술 메타데이터의 메타데이터 스토리지는 무료로 제공됩니다.

USD 외의 통화로 지불하는 경우 Cloud Platform SKU에 해당 통화로 표기된 가격이 적용됩니다.

Knowledge Catalog 스토리지 가격 책정

메타데이터 스토리지 요금 (항목 및 측면 요금 포함)은 해당 리소스가 생성된 프로젝트에 청구됩니다.

월간 평균 저장용량

가격(USD)

모두

US$0.002739726 / 1 gibibyte hour

Data Catalog의 리소스를 Dataplex Universal Catalog에서 동시에 사용할 수 있게 되면 해당 리소스의 활성 인스턴스 하나에 대해서만 요금이 청구됩니다.

Knowledge Catalog에 대한 Dataplex Universal Catalog API 요금

사용자가 Knowledge Catalog와 상호작용할 때 다음을 포함한 API 호출은 무료입니다.

  • Dataplex Universal Catalog 리소스 만들기 및 관리
  • 계보 리소스 만들기 및 관리
  • 카탈로그 검색

가격 책정 예시

이 섹션에서는 Dataplex Universal Catalog 비용을 계산하는 방법을 예시와 함께 설명합니다.

작은 부분

  • 사용자 A가 작은 애스펙트 (각각 1,024바이트)를 만들고 적용합니다. 월별 요율이 $10인 경우 사용자가 5GiB의 메타데이터를 저장할 수 있고, 이는 약 500만 개의 애스펙트에 해당합니다. 테이블당 하나의 측면을 가정하면 총 5백만 개의 테이블에 측면이 있습니다.
  • 사용자 B가 해당 월 10일에 각각 1KB의 애스펙트 500만 개를 만들고 20일에 애스펙트를 삭제합니다. 비용은 $3.33이며, 다음과 같이 5GiB의 데이터를 1/3개월로 나눈 값입니다.
로드 중...

큰 측면

  • 사용자 C가 큰 애스펙트 (각각 10KB)를 만들고 적용합니다. 월별 요율이 $10인 경우 사용자가 5 GiB의 메타데이터를 저장할 수 있고, 이는 약 50만 개의 애스펙트에 해당합니다. 테이블당 하나의 측면을 가정하면 총 50만 개의 테이블에 측면이 있습니다.
  • 사용자 D가 10, 000개의 애스펙트 유형 (예: ETL, 데이터 거버넌스, 데이터 품질)을 만들고 각각의 10개 애스펙트 유형을 사용하여 큰 애스펙트 (각각 10KB)를 적용합니다. 월별 요율이 $10인 경우 사용자가 5GiB의 메타데이터를 저장할 수 있고, 이는 약 50만 개의 애스펙트에 해당합니다. 테이블당 10개의 애스펙트를 가정할 경우 총 5만 개의 애스펙트가 있는 테이블로 계산됩니다.

Data Catalog 가격 책정 (지원 중단됨)

이 섹션에서는 지원 중단 단계에 있는 Data Catalog의 가격 책정 (서비스 중단을 방지하기 위해 Dataplex Universal Catalog로 전환)을 설명합니다.

Data Catalog 요금은 Data Catalog의 메타데이터 스토리지와 Data Catalog API에 대한 API 호출에 적용됩니다.

메타데이터 스토리지 및 API 호출 요금은 일 단위로 발생합니다. 미청구 사용량은 Google Cloud 콘솔에서 확인할 수 있습니다.

참고: 별도로 지정하지 않는 한 가격 책정 모델은 프로젝트가 아닌 계정에 적용됩니다.

Data Catalog 스토리지 가격 책정

월간 평균 저장용량

가격(USD)

최대 1 MiB

무료

1MiB 초과

US$0.002739726 / 1 gibibyte hour

Data Catalog API 요금

Data Catalog API 호출은 다음 표에 설명된 대로 청구됩니다.

참고: Google Cloud 콘솔의 Data Catalog 페이지에서 수행된 검색어는 무료로 제공됩니다.

항목

가격(USD)

API 호출

0 count to 1,000,000 count
US$0.00 (Free) / 100,000 count, per 1 month / account
1,000,000 count and above
US$10.00 / 100,000 count, per 1 month / account

USD 외의 통화로 지불하는 경우 Cloud Platform SKU에 해당 통화로 표기된 가격이 적용됩니다.

다음 단계

커스텀 견적 요청

Google Cloud의 사용한 만큼만 지불하는 가격 책정 방식을 사용하면 사용한 서비스에 대한 요금만 지불하면 됩니다. 영업팀에 문의하여 조직에 대한 커스텀 견적을 받아 보세요.
Google Cloud