Google Cloud Knowledge Catalog 소개. 블로그 읽기

Knowledge Catalog(이전 명칭: Dataplex)

에이전트에 대한 상시 가동 컨텍스트 및 거버넌스

Knowledge Catalog는 엔터프라이즈를 위한 범용 컨텍스트 엔진으로, 에이전트가 복잡한 작업을 정확하게 실행하도록 지원합니다.

기능

데이터 자산 전반의 컨텍스트 집계

Knowledge Catalog는 Google 및 파트너 데이터 플랫폼, 시맨틱 모델, 서드 파티 카탈로그 전반에서 네이티브 컨텍스트를 집계하여 단일한 관리형 정보 소스로 통합합니다. BigQuery, AlloyDB, Spanner, Cloud SQL, Firestore(프리뷰), Looker(프리뷰)를 비롯한 기본 시스템 전반에서 기술 메타데이터를 자동으로 수집합니다. Ab Initio, Anomalo, Atlan, Collibra, aDatahub와 같은 서드 파티 데이터베이스 및 파트너 카탈로그와의 통합도 지원합니다.

지속적인 학습을 통해 데이터 보강 및 의미 생성

비정형 항목 추출과 함께 스키마, 로그, BI 모델을 마이닝하여 데이터 보강을 자동화합니다. 스마트 저장용량 및 객체 컨텍스트 API는 파일을 자동 태그 지정하고 임베딩하며, Gemini는 원시 데이터에서 비즈니스 항목을 매핑합니다. 컨텍스트 큐레이션은 자연어 용어집과 SQL 패턴을 빌드하여 의도를 파악합니다. 마지막으로, 검증된 쿼리는 시맨틱 가드레일과 사전 검증된 로직을 제공하여 할루시네이션과 조인 오류를 제거하고 비즈니스의 정확한 동적 맵을 보장합니다.

강력하고 안전한 검색으로 에이전트의 잠재력을 최대한 활용하세요

1초 미만의 지연 시간과 정확한 관련성을 통해 AI 에이전트의 시맨틱 검색을 활용하세요. Knowledge Catalog는 적절한 컨텍스트를 즉시 순위 지정하여 에이전트에게 실시간으로 반환합니다. 신뢰를 얻기 위해 Google Cloud의 전역 검색은 메타데이터 액세스 권한을 존중하므로 에이전트는 명시적으로 볼 수 있는 권한이 부여된 애셋만 검색하고 이에 대해 조치를 취할 수 있습니다. 강력한 평가 프레임워크를 통해 측정 가능한 컨텍스트 평가를 얻어 에이전트에 제공되는 컨텍스트의 관련성과 품질을 지속적으로 최적화할 수 있습니다.

전체 데이터 생태계 전반에서 자동화된 거버넌스

원시 메타데이터를 AI의 신뢰할 수 있는 기반으로 변환하여 확장 가능한 자동화된 거버넌스를 제공할 수 있습니다. 분산된 데이터 소스와 멀티모달 데이터 전반에 걸쳐 정책 기반 품질 검사와 이상 감지를 적용할 수 있습니다. 자동으로 캡처된 계보와 자동화된 메타데이터 생성을 결합한 Knowledge Catalog는 Gemini를 사용하여 이러한 모든 신호를 명확한 비즈니스 컨텍스트로 변환합니다. 이 통합 컨트롤 플레인은 정의를 표준화하고 모든 데이터 애셋이 거버넌스에 적용되고 추적 가능하며 에이전트형 워크플로에 사용될 수 있도록 보장합니다.

비즈니스 시맨틱스 정의

비즈니스 로직을 거버넌스가 적용된 단일 레이어로 동기화합니다. Knowledge Catalog는 스키마, 쿼리 로그, Looker 모델에서 컨텍스트를 자동으로 합성하여 AI 에이전트가 효과적으로 추론하는 데 필요한 관계와 측정항목을 정의합니다. 시맨틱 모델을 바이브 코딩하거나 시트에서 로직을 추출하는 등 모든 데이터는 통합된 용어집으로 수렴됩니다. 이를 통해 엔터프라이즈 전체에서 일관된 정책 기반 거버넌스를 보장할 수 있습니다.

에이전트의 컨텍스트 검색

에이전트가 엔터프라이즈 데이터에서 전체적인 컨텍스트를 검색할 수 있도록 지원합니다. 에이전트는 시맨틱 검색, 컨텍스트 API, MCP 도구를 통해 데이터 자산을 즉시 발견하고 사전 생성된 풍부한 메타데이터를 추출할 수 있습니다. 사전 검증된 '표준 쿼리'와 시맨틱 인사이트를 활용하여 에이전트는 복잡한 작업을 실행하고, 정확한 정보를 검색하며, 전례 없는 정밀도와 규모로 데이터 생태계를 탐색할 수 있습니다.

작동 방식

Knowledge Catalog는 단편화된 데이터를 에이전트가 사용할 수 있는 컨텍스트로 통합합니다. Google의 데이터 클라우드, 제3자 데이터베이스, 파트너 전반에서 상시 카탈로그 작성과 메타데이터 수집 기능을 제공합니다. 이러한 실시간 엔터프라이즈 컨텍스트를 통해 AI 에이전트는 유용한 정보를 비롯해 거버넌스가 적용된 자율적인 행동을 안전하게 수행할 수 있습니다.

일반적인 용도

데이터부터 AI까지 거버넌스 지원

데이터부터 AI까지 거버넌스 기반 빌드

단일 검색 환경에서 조직 전반의 데이터 및 AI 애셋을 탐색하고 IAM 권한을 준수하면서 프로젝트와 리전에 걸쳐 AI 모델, 데이터 세트, 관련 데이터 아티팩트를 즉시 찾을 수 있습니다. 또한 비즈니스 컨텍스트로 자산을 보강하고 소유권, 주요 속성, 관련 컨텍스트와 같은 정보에 입각한 의사 결정을 위해 비즈니스 메타데이터로 AI 아티팩트를 보강할 수 있습니다.

튜토리얼, 빠른 시작, 실습

데이터부터 AI까지 거버넌스 기반 빌드

단일 검색 환경에서 조직 전반의 데이터 및 AI 애셋을 탐색하고 IAM 권한을 준수하면서 프로젝트와 리전에 걸쳐 AI 모델, 데이터 세트, 관련 데이터 아티팩트를 즉시 찾을 수 있습니다. 또한 비즈니스 컨텍스트로 자산을 보강하고 소유권, 주요 속성, 관련 컨텍스트와 같은 정보에 입각한 의사 결정을 위해 비즈니스 메타데이터로 AI 아티팩트를 보강할 수 있습니다.

멀티모달 데이터 검색

에이전트가 멀티모달 데이터 인사이트를 쉽게 발견할 수 있도록 지원

중요한 비즈니스 지식은 설계 문서, 위키, PDF, 이미지와 같은 비정형 소스로 한정된 경우가 많습니다. 이제 수천 개의 PDF 계약서, 설계 문서, 위키를 즉시 구조화된 지식 그래프로 전환할 수 있습니다. 이를 통해 AI 에이전트는 이를 쿼리하여 '2025년 공급업체 계약에 공통적으로 포함된 책임 조항은 무엇인가?'와 같은 복잡한 질문에 대해 근거가 명확하고 추적 가능한 사실을 바탕으로 답변할 수 있습니다.

튜토리얼, 빠른 시작, 실습

에이전트가 멀티모달 데이터 인사이트를 쉽게 발견할 수 있도록 지원

중요한 비즈니스 지식은 설계 문서, 위키, PDF, 이미지와 같은 비정형 소스로 한정된 경우가 많습니다. 이제 수천 개의 PDF 계약서, 설계 문서, 위키를 즉시 구조화된 지식 그래프로 전환할 수 있습니다. 이를 통해 AI 에이전트는 이를 쿼리하여 '2025년 공급업체 계약에 공통적으로 포함된 책임 조항은 무엇인가?'와 같은 복잡한 질문에 대해 근거가 명확하고 추적 가능한 사실을 바탕으로 답변할 수 있습니다.

자동화된 데이터 제품 만들기

에이전트를 위한 거버넌스 데이터 제품 자동 생성

단순한 테이블을 넘어 내장 인텐트, SLA, 거버넌스 제약조건이 포함된 독립형 인텔리전스 단위인 데이터 제품을 만드세요. Knowledge Catalog는 데이터 자산 전반의 관계를 자동으로 추론하여 이러한 자산을 데이터 제품으로 패키징하며, 이를 통해 여러 부서의 AI 팀과 에이전트가 쉽게 배포하고 확장할 수 있도록 지원합니다.

튜토리얼, 빠른 시작, 실습

에이전트를 위한 거버넌스 데이터 제품 자동 생성

단순한 테이블을 넘어 내장 인텐트, SLA, 거버넌스 제약조건이 포함된 독립형 인텔리전스 단위인 데이터 제품을 만드세요. Knowledge Catalog는 데이터 자산 전반의 관계를 자동으로 추론하여 이러한 자산을 데이터 제품으로 패키징하며, 이를 통해 여러 부서의 AI 팀과 에이전트가 쉽게 배포하고 확장할 수 있도록 지원합니다.

사람과 에이전트를 위한 공유 시맨틱스

조직 전반의 비즈니스 시맨틱 정의

데이터 엔지니어는 기술 스키마에서 구조를 정의하고 분석가는 BI 도구에서 의미를 정의합니다. 이 과정에서 AI 에이전트가 활용할 정보에 격차가 생기며, 이는 신뢰할 수 없는 결과로 이어질 수 있습니다. Knowledge Catalog는 엄격한 엔터프라이즈 거버넌스가 적용된 공유 시맨틱 계층을 빌드할 수 있도록 지원합니다. 사람이 질문을 하든 에이전트가 API를 통해 작업을 수행하든, 답변은 항상 신뢰할 수 있는 동일한 기업 지식을 기반으로 합니다.

튜토리얼, 빠른 시작, 실습

조직 전반의 비즈니스 시맨틱 정의

데이터 엔지니어는 기술 스키마에서 구조를 정의하고 분석가는 BI 도구에서 의미를 정의합니다. 이 과정에서 AI 에이전트가 활용할 정보에 격차가 생기며, 이는 신뢰할 수 없는 결과로 이어질 수 있습니다. Knowledge Catalog는 엄격한 엔터프라이즈 거버넌스가 적용된 공유 시맨틱 계층을 빌드할 수 있도록 지원합니다. 사람이 질문을 하든 에이전트가 API를 통해 작업을 수행하든, 답변은 항상 신뢰할 수 있는 동일한 기업 지식을 기반으로 합니다.

개방형 레이크하우스 제어

개방형 레이크하우스를 위한 통합 거버넌스

Knowledge Catalog는 Google Cloud의 레이크하우스와 긴밀하게 통합되며 해당 카탈로그를 통합하여 BigQuery 및 Google Cloud Managed Service for Apache Spark와 같은 여러 엔진에서 중앙 집중식으로 정의되고 적용되는 거버넌스 정책을 지원합니다. Knowledge Catalog는 또한 시맨틱 검색, 데이터 계보, 프로파일링, 품질 검사를 지원하여 레이크하우스 전반의 거버넌스를 강화하고 개방형 데이터 레이크하우스를 위한 관리형 기반을 제공합니다.

튜토리얼, 빠른 시작, 실습

개방형 레이크하우스를 위한 통합 거버넌스

Knowledge Catalog는 Google Cloud의 레이크하우스와 긴밀하게 통합되며 해당 카탈로그를 통합하여 BigQuery 및 Google Cloud Managed Service for Apache Spark와 같은 여러 엔진에서 중앙 집중식으로 정의되고 적용되는 거버넌스 정책을 지원합니다. Knowledge Catalog는 또한 시맨틱 검색, 데이터 계보, 프로파일링, 품질 검사를 지원하여 레이크하우스 전반의 거버넌스를 강화하고 개방형 데이터 레이크하우스를 위한 관리형 기반을 제공합니다.

가격 책정

Knowledge Catalog 가격 책정	Knowledge Catalog 가격은 사용한 만큼만 지불하는 방식을 기준으로 책정됩니다.
서비스 및 사용량	설명	가격(USD)
Knowledge Catalog 처리	Knowledge Catalog 표준 및 프리미엄 처리는 데이터 컴퓨팅 단위(DCU)로 측정됩니다. DCU 시간당은 추상적인 청구 단위이며 실제 측정은 사용하는 개별 기능에 따라 다릅니다.
	무료 등급 Knowledge Catalog 처리 Knowledge Catalog 표준 처리의 경우 매월 100DCU 시간까지	무료
	표준 Knowledge Catalog 처리 Knowledge Catalog 표준 등급은 Cloud Storage에서 테이블 및 파일 세트 메타데이터를 자동으로 탐색하는 데이터 탐색 기능을 제공합니다.	시작 가격 $0.060 DCU-시간당
	프리미엄 Knowledge Catalog 처리 Knowledge Catalog 프리미엄 처리 등급에는 Knowledge Catalog의 데이터 탐색 워크벤치, 데이터 계보, 데이터 품질, 데이터 프로파일링 기능이 포함됩니다.	시작 가격 $0.089 DCU-시간당
Knowledge Catalog 메타데이터 및 API 가격 책정	메타데이터 스토리지 가격 책정 Knowledge Catalog는 짧은 시간 동안의 평균 저장된 메타데이터 양을 측정합니다. 이러한 측정 값을 합해 한 달 동안의 평균을 낸 후 이 평균 값에 월별 요율을 곱하여 청구 금액을 계산합니다.
	Knowledge Catalog 무료 등급 월 평균 스토리지 1MiB까지	무료
	메타데이터 스토리지 월 평균 스토리지 1MiB 초과	시작 가격 $2 매월 1GiB당
	API 요금 Knowledge Catalog는 Data Catalog API 및 Data Lineage API에 대한 API 호출에 대해 요금을 부과합니다.
	API 호출 월별 첫 100만 개	무료
	API 호출 한 달에 100만 개 초과	시작 가격 $10 100,000개 API 호출당
Knowledge Catalog 셔플 스토리지 가격 책정	Shuffle 스토리지 가격에는 데이터 탐색 워크벤치용으로 구성된 환경에 지정된 모든 디스크 스토리지가 포함됩니다.	시작 가격 $0.040 1GB당 월별 과금
기타 사용량	Knowledge Catalog의 데이터 구성 기능(레이크, 영역 또는 애셋 설정)과 보안 정책 적용 및 전파는 무료로 제공됩니다.
기타 사용량	일부 Knowledge Catalog 기능은 Google Cloud Managed Service for Apache Spark, BigQuery, Dataflow를 사용하여 작업 실행을 트리거합니다. 이러한 서비스의 사용은 각각의 가격 책정 모델에 따라 요금이 청구되며, 청구 요금은 해당 서비스에 표시됩니다.

Knowledge Catalog 가격 책정

Knowledge Catalog 가격은 사용한 만큼만 지불하는 방식을 기준으로 책정됩니다.

Knowledge Catalog 처리

설명

Knowledge Catalog 표준 및 프리미엄 처리는 데이터 컴퓨팅 단위(DCU)로 측정됩니다. DCU 시간당은 추상적인 청구 단위이며 실제 측정은 사용하는 개별 기능에 따라 다릅니다.

가격(USD)

무료 등급 Knowledge Catalog 처리

Knowledge Catalog 표준 처리의 경우 매월 100DCU 시간까지

설명

무료

표준 Knowledge Catalog 처리

Knowledge Catalog 표준 등급은 Cloud Storage에서 테이블 및 파일 세트 메타데이터를 자동으로 탐색하는 데이터 탐색 기능을 제공합니다.

설명

Starting at

$0.060

DCU-시간당

프리미엄 Knowledge Catalog 처리

Knowledge Catalog 프리미엄 처리 등급에는 Knowledge Catalog의 데이터 탐색 워크벤치, 데이터 계보, 데이터 품질, 데이터 프로파일링 기능이 포함됩니다.

설명

Starting at

$0.089

DCU-시간당

Knowledge Catalog 메타데이터 및 API 가격 책정

설명

메타데이터 스토리지 가격 책정

Knowledge Catalog는 짧은 시간 동안의 평균 저장된 메타데이터 양을 측정합니다. 이러한 측정 값을 합해 한 달 동안의 평균을 낸 후 이 평균 값에 월별 요율을 곱하여 청구 금액을 계산합니다.

가격(USD)

Knowledge Catalog 무료 등급

월 평균 스토리지 1MiB까지

설명

무료

메타데이터 스토리지

월 평균 스토리지 1MiB 초과

설명

Starting at

$2

매월 1GiB당

API 요금

Knowledge Catalog는 Data Catalog API 및 Data Lineage API에 대한 API 호출에 대해 요금을 부과합니다.

설명

API 호출

월별 첫 100만 개

설명

무료

API 호출

한 달에 100만 개 초과

설명

Starting at

$10

100,000개 API 호출당

Knowledge Catalog 셔플 스토리지 가격 책정

설명

Shuffle 스토리지 가격에는 데이터 탐색 워크벤치용으로 구성된 환경에 지정된 모든 디스크 스토리지가 포함됩니다.

가격(USD)

Starting at

$0.040

1GB당 월별 과금

기타 사용량

설명

Knowledge Catalog의 데이터 구성 기능(레이크, 영역 또는 애셋 설정)과 보안 정책 적용 및 전파는 무료로 제공됩니다.

가격(USD)

일부 Knowledge Catalog 기능은 Google Cloud Managed Service for Apache Spark, BigQuery, Dataflow를 사용하여 작업 실행을 트리거합니다. 이러한 서비스의 사용은 각각의 가격 책정 모델에 따라 요금이 청구되며, 청구 요금은 해당 서비스에 표시됩니다.

설명