이 문서에서는 Data Catalog의 할당량과 한도를 설명합니다.
할당량은 하드웨어, 소프트웨어, 네트워크 구성요소를 비롯해 Google Cloud 프로젝트가 사용할 수 있는 특정 공유 Google Cloud 리소스의 양을 제한합니다. 할당량은 다음을 수행하는 시스템의 일부입니다.
- Google Cloud 제품 및 서비스 사용 또는 소비량을 모니터링합니다.
- 공정성 보장 및 사용량 급증 방지 등 여러 이유로 리소스 소비를 제한합니다.
- 사전 정의된 제한사항을 자동으로 적용하는 구성을 유지합니다.
- 할당량을 변경하거나 변경을 요청할 수 있는 수단을 제공합니다.
할당량이 초과되면 대부분의 경우 시스템에서 관련 Google 리소스에 대한 액세스를 즉시 차단하고 수행하려는 작업이 실패합니다. 대부분의 경우 할당량은 각 Google Cloud 프로젝트에 적용되며 해당 Google Cloud 프로젝트를 사용하는 모든 애플리케이션과 IP 주소 전반에 공유됩니다.
선택한 할당량은 Google Cloud 콘솔을 사용해 늘리거나 줄입니다. 자세한 내용은 할당량 상향 요청을 참조하세요.
리소스에도 한도가 있습니다. 이 한도는 할당량 시스템과 관련이 없습니다. 별도로 명시되지 않는 한 한도를 변경할 수 없습니다.
기본적으로 할당량 및 한도는 프로젝트별로 적용됩니다.
할당량
조직의 QPM(분당 쿼리 수)을 계산하기 위해 Data Catalog는 조직에 있는 프로젝트의 QPM을 함께 추가합니다.
Data Catalog는 프로젝트 간 요청 워크로드 분산을 제어하는 대신 QPM 할당량을 사용하여 서비스 과부하를 방지합니다. 따라서 프로젝트와 조직의 기본 QPM 할당량은 동일합니다. 즉, 조직에 프로젝트가 여러 개 있고 그 중 하나의 요청 워크로드가 기본 조직(및 동일한 프로젝트) 할당량에 근접하면 이 프로젝트는 조직 내 다른 프로젝트의 잠재적 워크로드에 영향을 줄 수 있습니다.
조직 및 프로젝트 할당량을 개별적으로 조정하려면 할당량 상향 요청을 참조하세요.
QPM 할당량 | 기본값 |
---|---|
읽기 | 6000 |
쓰기 | 1500 |
검색 | 1200 |
데이터 계보 할당량
Data Lineage API는 다음 할당량을 적용합니다.
- 데이터만 반환하는 읽기 요청
- 데이터를 만들거나 변경하는 쓰기 요청
- OpenLineage 만들기
Data Lineage API는 프로젝트, 사용자 및 리전별로 데이터 계보 할당량을 적용합니다. 기본 할당량은 다음과 같습니다.
QPM 할당량 | 기본값 |
---|---|
Read | 1000 |
Write | 6000 |
계보 열기 | 3000 |
예를 들어 할당량을 초과하기 전 us
리전의 test-project
프로젝트에서 분당 최대 1,000개의 GetProcess
요청을 제출할 수 있습니다.
기타 할당량
한도
Data Catalog API는 항목, 태그, 비즈니스 메타데이터에 한도를 적용합니다.
항목 한도
한도 | 가치 |
---|---|
모든 위치의 조직당 최대 항목 그룹 수 | 1만 |
모든 위치의 조직당 최대 항목 수 (초과 시 검색 결과 지연 시간이 길어질 수 있음) |
1억 |
항목 그룹당 최대 항목 수 | 10만 |
항목당 크기(MB) | 10MB |
페이지당 최대 검색결과 수 | 1000 |
태그 한도
한도 | 가치 |
---|---|
태그 템플릿당 필드 | 500 |
태그 템플릿의 필드 이름 길이 | 512바이트 |
태그 템플릿의 리소스 이름 길이 | 512바이트 |
태그 템플릿의 문자열 필드 길이 | 10,000바이트 |
태그 템플릿의 최대 열거형 값 수 | 100 |
항목당 태그 | 1000 |
두 숫자의 최대 합:
|
15,000 |
분류별 최대 정책 태그 수 | 100 |
프로젝트당 최대 분류 수 | 40 |
정책 태그 트리의 최대 깊이 (분류당 100개의 정책 태그가 계속 적용됨) |
5 |
정책 태그 이름의 길이 | 200바이트 |
사용자당 별표표시된 항목 수 | 200 |
비즈니스 메타데이터 한도
한도 | 가치 |
---|---|
데이터 항목당 최대 데이터 관리자 수 | 15 |
개요에서 서식 있는 텍스트의 최대 크기(이미지 크기 제외) | 100KB |
이미지를 포함한 서식 있는 텍스트의 총 크기 | 10MB |