Dataplex 측정항목 모니터링

Cloud Monitoring은 클라우드 기반 애플리케이션의 성능, 업타임, 전반적인 상태에 관한 정보를 제공합니다. Google Cloud 운영 제품군은 Dataplex 서비스에서 측정항목, 이벤트, 메타데이터를 수집하여 대시보드와 차트를 통해 통계를 생성합니다.

Monitoring의 서비스 측정항목 액세스

Dataplex 서비스 리소스 측정항목은 Dataplex 서비스에서 자동으로 사용 설정됩니다. 이러한 측정항목을 보려면 Monitoring을 사용하세요.

Google Cloud Console에서 또는 Monitoring API를 사용하여 Monitoring에 액세스할 수 있습니다.

콘솔

  1. Google Cloud 콘솔에서 Cloud Monitoring > 측정항목 탐색기 페이지로 이동합니다.

    측정항목 탐색기 페이지로 이동

  2. '리소스 유형 및 측정항목 찾기' 드롭다운 목록에서 Cloud Dataplex 리소스를 선택합니다.

  3. 입력 상자를 다시 클릭한 후 드롭다운 목록에서 측정항목을 선택합니다. 측정항목 이름에 마우스를 가져가면 측정항목에 대한 정보가 표시됩니다.

필터를 선택하고, 측정항목 라벨별로 그룹화하고, 집계를 수행하고, 차트 보기 옵션을 선택할 수 있습니다.

REST

Monitoring timeSeries.list API를 사용하여 filter 표현식으로 정의된 측정항목을 캡처 및 나열합니다. API 페이지에서 API 사용해 보기 템플릿을 사용하여 API 요청을 전송하고 응답을 표시하세요.

Monitoring의 Dataplex 서비스 측정항목

Dataplex 서비스 측정항목은 서비스 상태 모니터링을 용이하게 합니다.

범위 측정항목 이름 모니터링 리소스 측정항목 설명
레이크 requires_action dataplex.googleapis.com/Lake 레이크에 해결되지 않은 관리 작업이 있는지 여부입니다. 레이크가 실행 가능한 경우 1, 그 외의 경우에는 0입니다.
영역 requires_action dataplex.googleapis.com/Zone 데이터 영역에 해결되지 않은 관리 작업이 있는지 여부입니다. 데이터 영역을 사용할 수 있는 경우 1, 그 외의 경우에는 0입니다.
애셋 requires_action dataplex.googleapis.com/Asset 애셋에 해결되지 않은 관리 작업이 있는지 여부입니다. 애셋을 사용 가능한 경우 1, 그 외의 경우에는 0입니다.
애셋 활성 dataplex.googleapis.com/Asset 애셋이 활성 상태인지 여부입니다. 애셋이 오류 이외의 상태에 있는 경우 1, 그 외의 경우에는 0입니다.
애셋 data_items dataplex.googleapis.com/Asset 애셋 내에서 검색된 현재 데이터 항목 수입니다(Cloud Storage 버킷의 객체, BigQuery 데이터 세트의 행).
애셋 data_size dataplex.googleapis.com/Asset 애셋의 총 데이터 크기입니다(바이트 단위로 보고됨).
애셋 filesets dataplex.googleapis.com/asset 애셋 내에서 검색된 현재 파일 세트 수입니다.
애셋 테이블 dataplex.googleapis.com/Asset 애셋 내에서 검색된 현재 테이블 수입니다.

커스텀 Monitoring 대시보드 빌드

선택한 Dataplex 서비스 측정항목의 차트를 표시하는 커스텀 Monitoring 대시보드를 빌드할 수 있습니다.

  1. Monitoring 대시보드 개요 페이지에서 + 대시보드 만들기를 선택합니다. 대시 보드의 이름을 입력한 다음 오른쪽 상단 메뉴에서 차트 추가를 클릭하여 차트 추가 창을 엽니다. 리소스 유형으로 Cloud Dataplex 리소스를 선택합니다. 하나 이상의 측정항목과 측정항목 및 차트 속성을 선택합니다. 그런 다음 차트를 저장합니다.

  2. 추가 차트를 대시보드에 추가할 수 있습니다. 대시보드를 저장하면 해당 제목이 Monitoring 대시보드 개요 페이지에 표시됩니다. 대시보드 차트를 대시보드 표시 페이지에서 보고, 업데이트하고, 삭제할 수 있습니다.

Monitoring 알림 사용

Dataplex 서비스 또는 작업 측정항목이 지정된 기준을 초과할 때 알림을 표시하는 Monitoring 알림을 만들 수 있습니다.

알림 만들기

  1. Google Cloud 콘솔에서 Monitoring 알림을 엽니다. + 정책 만들기를 클릭하여 새 알림 정책 만들기 양식을 엽니다. 알림 조건, 정책 트리거, 알림 채널, 문서를 추가하여 알림을 정의합니다.

  2. 조건 추가를 선택하여 측정항목 탭이 선택된 알림 조건 양식을 엽니다. 필드를 입력하여 알림 조건을 정의한 다음 추가를 클릭합니다.

  3. 알림 조건을 추가한 후 알림 채널, 정책 트리거, 문서, 알림 정책 이름을 설정하여 알림 정책을 완료합니다.

알림 보기

측정항목 기준 조건에 의해 알림이 트리거되면 Monitoring에서 이슈 및 해당 이벤트가 만들어집니다. Google Cloud 콘솔의 Monitoring 알림 페이지에서 이슈를 볼 수 있습니다. 알림 정책에 이메일 또는 SMS 알림과 같은 알림 메커니즘을 정의한 경우 Monitoring에서 이슈에 대한 알림도 전송합니다.

다음 단계