단일 프로젝트의 Vertex AI 데이터 프로파일링

미리보기

이 기능에는 서비스별 약관의 일반 서비스 약관 섹션에 있는 'GA 이전 제공 서비스 약관'이 적용됩니다. GA 이전 기능은 '있는 그대로' 제공되며 지원이 제한될 수 있습니다. 자세한 내용은 출시 단계 설명을 참조하세요.

이 페이지에서는 프로젝트 수준에서 Vertex AI 데이터 디스커버리를 구성하는 방법을 설명합니다. 조직 또는 폴더를 프로파일링하려면 조직 또는 폴더의 Vertex AI 데이터 프로파일링을 참고하세요.

이 미리보기에 참여하려면 [e-mail]으로 이메일을 보내주세요.

디스커버리 서비스에 대한 자세한 내용은 데이터 프로필을 참조하세요.

시작하기 전에

1. Cloud Data Loss Prevention API가 프로젝트에 사용 설정되어 있는지 확인하세요.

   1. Sign in to your Google Cloud account. If you're new to Google Cloud, create an account to evaluate how our products perform in real-world scenarios. New customers also get $300 in free credits to run, test, and deploy workloads.

   2. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

      Note: If you don't plan to keep the resources that you create in this procedure, create a project instead of selecting an existing project. After you finish these steps, you can delete the project, removing all resources associated with the project.

      Go to project selector

   3. Make sure that billing is enabled for your Google Cloud project.

   4. Enable the required API.

      Enable the API

   5. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

      Note: If you don't plan to keep the resources that you create in this procedure, create a project instead of selecting an existing project. After you finish these steps, you can delete the project, removing all resources associated with the project.

      Go to project selector

   6. Make sure that billing is enabled for your Google Cloud project.

   7. Enable the required API.

      Enable the API

2. 프로젝트 수준에서 데이터 프로필을 구성하는 데 필요한 IAM 권한이 있는지 확인합니다.

3. 프로파일링할 데이터가 있는 리전마다 검사 템플릿이 있어야 합니다. 여러 리전에 단일 템플릿을 사용하려면 global 리전에 저장된 템플릿을 사용하면 됩니다. 조직 정책으로 인해 global 리전에서 검사 템플릿을 만들 수 없는 경우 각 리전에 전용 검사 템플릿을 설정해야 합니다. 자세한 내용은 데이터 상주 고려사항을 참조하세요.

   이 태스크를 통해 global 리전에만 검사 템플릿을 만들 수 있습니다. 하나 이상의 지역에서 전용 검사 템플릿이 필요한 경우 이 작업을 수행하기 전에 해당 템플릿을 만들어야 합니다.

4. Sensitive Data Protection이 새 데이터 세트를 프로파일링하는 경우와 같이 특정 이벤트가 발생할 때 Pub/Sub에 알림을 전송하도록 Sensitive Data Protection을 구성할 수 있습니다. 이 기능을 사용하려면 먼저 Pub/Sub 주제를 만들어야 합니다.

스캔 구성 만들기

1. 스캔 구성 만들기 페이지로 이동합니다.

   스캔 구성 만들기로 이동

2. 프로젝트로 이동합니다. 툴바에서 프로젝트 선택기를 클릭하고 프로젝트를 선택합니다.

스캔 구성 만들기 페이지의 단계에 대해서는 다음 섹션에서 자세히 설명합니다. 각 섹션의 끝에서 계속을 클릭합니다.

탐색 유형 선택

Vertex AI를 선택합니다.

범위 선택하기

다음 중 하나를 수행합니다.

• 단일 데이터 세트를 스캔하려면 1개 데이터 세트 스캔을 선택합니다.

  각 데이터 세트에는 단일 리소스 스캔 구성이 하나만 있을 수 있습니다. 자세한 내용은 단일 데이터 리소스 프로파일링을 참고하세요.

  프로파일링할 데이터 세트의 세부정보를 입력합니다.

• 표준 프로젝트 수준 프로파일링을 실행하려면 선택한 프로젝트 스캔을 선택합니다.

일정 관리

기본 프로파일링 빈도가 요구에 부합하는 경우 스캔 구성 만들기 페이지의 이 섹션을 건너뛰어도 됩니다.

다음과 같은 이유로 이 섹션을 구성합니다.

• 모든 데이터 또는 데이터의 특정 하위 집합의 프로파일링 빈도를 세밀하게 조정합니다.
• 프로파일링하지 않을 데이터 세트를 지정합니다.
• 프로파일링을 두 번 이상 수행하지 않을 데이터 세트를 지정합니다.

프로파일링 빈도를 세밀하게 조정하려면 다음 단계를 따르세요.

1. 일정 추가를 클릭합니다.

2. 필터 섹션에서 일정 범위에 있는 데이터 세트를 지정하는 하나 이상의 필터를 정의합니다.

   하나 이상의 프로젝트를 지정하는 프로젝트 ID 또는 정규 표현식을 지정합니다. 정규 표현식은 RE2 구문을 따라야 합니다.

   예를 들어 프로젝트의 모든 데이터 세트를 필터에 포함하려면 프로젝트 ID 필드에 프로젝트 ID를 입력합니다.

   필터를 더 추가해야 하면 필터 추가를 클릭하여 이 단계를 반복합니다.

3. 빈도를 클릭합니다.

4. 빈도 섹션에서 검색 서비스가 선택한 데이터 세트를 프로파일링해야 하는지 여부와 프로파일링하는 경우 그 빈도를 지정합니다.

   • 데이터 세트를 프로파일링하지 않으려면 이 데이터 프로파일링을 사용 중지합니다.

   • 데이터 세트를 한 번 이상 프로파일링하려면 이 데이터 프로파일링을 설정한 상태로 둡니다.

     이 섹션의 후속 필드에서 시스템이 데이터를 다시 프로파일링해야 하는지 여부와 재프로파일링 작업을 트리거할 이벤트를 지정합니다. 자세한 내용은 데이터 프로필 생성 빈도를 참조하세요.

     1. 일정에 따라에서 데이터 세트를 다시 프로파일링할 빈도를 지정합니다. 데이터 세트가 변경되었는지 여부와 관계없이 데이터 세트가 다시 프로파일링됩니다.
     2. 검사 템플릿 변경 시의 경우 연결된 검사 템플릿이 업데이트될 때 데이터를 다시 프로파일링할지 여부와 프로파일링하는 경우 그 빈도를 지정합니다.
        참고: 이 페이지의 검사 템플릿 선택 단계에서 사용할 검사 템플릿을 지정합니다.

        검사 템플릿 변경사항은 다음 중 하나가 발생할 때 감지됩니다.

        • 스캔 구성에서 검사 템플릿 이름이 변경됩니다.
        • 검사 템플릿의 updateTime가 변경됩니다.

     예를 들어 us-west1 리전에 대해 검사 템플릿을 설정하고 해당 검사 템플릿을 업데이트하면 us-west1 리전의 데이터만 다시 프로파일링됩니다.

5. 선택사항: 조건을 클릭합니다.

   조건 섹션에서는 Sensitive Data Protection에서 프로파일링하려면 필터에 정의된 데이터 세트에서 충족해야 하는 조건을 지정합니다.

   필요한 경우 다음을 설정합니다.

   • 최소 조건: 특정 기간에 도달할 때까지 데이터 세트 프로파일링을 지연하려면 이 옵션을 사용 설정하세요. 그런 다음 최소 기간을 입력합니다.

   • 시간 조건: 이전 데이터 세트를 전혀 프로파일링하지 않으려면 이 옵션을 사용 설정하세요. 그런 다음 날짜 선택 도구를 사용하여 날짜와 시간을 선택합니다. 선택한 타임스탬프 이전에 생성된 데이터 세트는 프로파일링에서 제외됩니다.

   조건 예시

   다음과 같은 구성이 있다고 가정해 보겠습니다.

   • 최소 조건

     • 최소 기간: 24시간

   • 시간 조건

     • 타임스탬프: 2022년 5월 4일 오후 11시 59분

   이 경우 민감한 정보 보호는 2022년 5월 4일 오후 11시 59분까지 생성된 모든 데이터 세트를 제외합니다. 이 날짜와 시간 이후에 생성된 데이터 세트 중에서 민감한 정보 보호는 24시간 이상 지난 데이터 세트만 프로파일링합니다.

6. 완료를 클릭합니다.

7. 일정을 더 추가하려면 일정 추가를 클릭하고 이전 단계를 반복하세요.

8. 일정 간의 우선순위를 지정하려면 위쪽 화살표와 아래쪽 화살표를 사용하여 일정의 순서를 변경합니다.

   일정의 순서는 일정 간의 충돌이 해결되는 방식을 지정합니다. 데이터 세트가 서로 다른 두 일정의 필터와 일치하는 경우 일정 목록에서 더 높은 일정이 해당 데이터 세트의 프로파일링 빈도를 지정합니다.

   참고: 검색 가격 책정 모드가 구독 모드인 경우 Sensitive Data Protection에서 데이터를 프로파일링하는 속도는 구매한 용량의 영향을 받습니다. 일일 프로파일링 용량을 확인하려면 사용률 모니터링을 참고하세요. 용량이 과소 프로비저닝된 경우 일정에 설정한 프로파일링 빈도가 따르지 않을 수 있습니다. 프로파일링할 데이터 세트의 백로그가 있는 경우 일정 순서에 따라 민감한 정보 보호에서 백로그의 데이터 세트를 프로파일링하는 순서가 지정되지 않습니다. 대신 범위 내의 모든 데이터 세트는 대기열에서 무작위로 할당된 슬롯을 받습니다.

   목록의 마지막 일정은 항상 기본 일정 라벨로 지정된 일정입니다. 이 기본 일정에는 생성된 일정과 일치하지 않는 선택한 범위의 데이터 세트가 포함됩니다. 이 기본 일정은 시스템 기본 프로파일링 빈도를 따릅니다.

9. 기본 일정을 조정하려면 일정 수정을 클릭하고 필요에 따라 설정을 조정합니다.

검사 템플릿 선택

검사 구성을 제공하는 방법에 따라 다음 옵션 중 하나를 선택합니다. 선택한 옵션에 관계없이 Sensitive Data Protection은 해당 데이터가 저장된 리전의 데이터를 스캔합니다. 즉, 데이터는 원래 리전을 벗어나지 않습니다.

옵션 1: 검사 템플릿 만들기

global 리전에 새 검사 템플릿을 만들려면 이 옵션을 선택하세요.

1. 새 검사 템플릿 만들기를 클릭합니다.

2. 선택사항: 선택한 기본 infoType을 수정하려면 infoType 관리를 클릭합니다.

   기본 제공 및 맞춤 infoType을 관리하는 방법에 관한 자세한 내용은 Google Cloud 콘솔을 통해 infoType 관리를 참고하세요.

   계속하려면 infoType을 한 개 이상 선택해야 합니다.

3. 선택사항: 규칙 세트를 추가하고 신뢰도 임계값을 설정하여 검사 템플릿을 추가로 구성합니다. 자세한 내용은 감지 구성을 참조하세요.

Sensitive Data Protection은 스캔 구성을 만들 때 이 새로운 검사 템플릿을 global 리전에 저장합니다.

옵션 2: 기존 검사 템플릿 사용

사용할 기존 검사 템플릿이 있는 경우 이 옵션을 선택하세요.

1. 기존 검사 템플릿 선택을 클릭합니다.
2. 사용하려는 검사 템플릿의 전체 리소스 이름을 입력합니다. 리전 필드에 검사 템플릿이 저장된 리전 이름이 자동으로 입력됩니다.

   입력하는 검사 템플릿은 프로파일링할 데이터와 동일한 리전에 있어야 합니다.

   데이터 상주를 준수하기 위해 Sensitive Data Protection은 템플릿이 저장된 리전 외부의 검사 템플릿을 사용하지 않습니다.

   검사 템플릿의 전체 리소스 이름을 찾으려면 다음 단계를 따르세요.

   1. 검사 템플릿 목록으로 이동합니다. 별도의 탭에서 이 페이지가 열립니다.

      검사 템플릿으로 이동

   2. 사용하려는 검사 템플릿이 포함된 프로젝트로 전환합니다.
   3. 템플릿 탭에서 사용할 템플릿의 템플릿 ID를 클릭합니다.
   4. 페이지가 열리면 템플릿의 전체 리소스 이름을 복사합니다. 전체 리소스 이름은 다음 형식을 따릅니다.

      projects/PROJECT_ID/locations/REGION/inspectTemplates/TEMPLATE_ID

   5. 스캔 구성 만들기 페이지의 템플릿 이름 필드에 템플릿의 전체 리소스 이름을 붙여넣습니다.
3. 다른 지역의 검사 템플릿을 추가하려면 검사 템플릿 추가를 클릭하고 템플릿의 전체 리소스 이름을 입력합니다. 전용 검사 템플릿이 있는 각 리전마다 이 단계를 반복합니다.
4. 선택사항: global 리전에 저장된 검사 템플릿을 추가합니다. Sensitive Data Protection은 전용 검사 템플릿이 없는 리전의 데이터에 이 템플릿을 자동으로 사용합니다.
주의: global 리전에 저장된 검사 템플릿을 포함하지 않으면 민감한 정보 보호는 전용 검사 템플릿이 없는 리전의 데이터를 프로파일링할 수 없습니다. 자세한 내용은 데이터 상주 고려사항을 참고하세요.

작업 추가

다음 섹션에서는 데이터 프로필을 생성한 후 Sensitive Data Protection이 수행할 작업을 지정합니다.

다른 Google Cloud 서비스가 작업 구성 요금을 청구하는 방법에 대한 자세한 내용은 데이터 프로필 내보내기 가격 책정을 참조하세요.

Security Command Center에 게시

데이터 프로필의 발견 항목은 Security Command Center에서 취약점 및 위협 발견 항목을 분류하고 대응 계획을 수립할 때 맥락을 제공합니다.

참고: Security Command Center를 구성하여 리소스에 포함된 데이터의 계산된 민감도에 따라 공격 경로 시뮬레이션 기능의 리소스에 자동으로 우선순위를 지정할 수도 있습니다. 자세한 내용은 데이터 민감도에 따라 리소스 우선순위 값 자동 설정을 참고하세요.

이 작업을 사용하려면 조직 수준에서 Security Command Center를 활성화해야 합니다. 조직 수준에서 Security Command Center를 활성화하면 Sensitive Data Protection과 같은 통합 서비스에서 발견 항목 흐름이 사용 설정됩니다. Sensitive Data Protection은 모든 서비스 등급의 Security Command Center와 호환됩니다.

Security Command Center가 조직 수준에서 활성화되지 않았으면 Sensitive Data Protection 발견 항목이 Security Command Center에 표시되지 않습니다. 자세한 내용은 Security Command Center의 활성화 수준 확인을 참조하세요.

데이터 프로필 결과를 Security Command Center로 보내려면 Security Command Center에 게시 옵션이 사용 설정되어 있는지 확인합니다.

자세한 내용은 Security Command Center에 데이터 프로필 게시를 참고하세요.

BigQuery에 데이터 프로필 사본 저장

데이터 프로필 사본을 BigQuery에 저장하도록 설정하면 생성된 모든 프로필의 저장된 사본 또는 내역을 유지할 수 있습니다. 이렇게 하면 감사 보고서를 만들고 데이터 프로필을 시각화하는 데 유용합니다. 이 정보를 다른 시스템에 로드할 수도 있습니다.

또한 이 옵션을 사용하면 데이터가 있는 리전에 관계없이 모든 데이터 프로필을 단일 뷰에서 확인할 수 있습니다. 이 옵션을 사용 중지해도 Google Cloud 콘솔에서 데이터 프로필을 계속 볼 수 있습니다. 하지만 Google Cloud 콘솔에서는 한 번에 하나의 리전을 선택하고 해당 리전의 데이터 프로필만 표시합니다.

참고: Sensitive Data Protection이 데이터 세트를 프로파일링하지 못하면 프로파일링이 주기적으로 재시도됩니다. 내보낸 데이터의 노이즈를 최소화하기 위해 Sensitive Data Protection은 성공적으로 생성된 프로필만 BigQuery로 내보냅니다.

데이터 프로필 사본을 BigQuery 테이블로 내보내려면 다음 단계를 수행합니다.

1. BigQuery에 데이터 프로필 사본 저장을 사용 설정합니다.

2. 데이터 프로필을 저장할 BigQuery 테이블의 세부정보를 입력합니다.

   • 프로젝트 ID에 데이터 프로필을 내보내려는 기존 프로젝트 ID를 입력합니다.

   • 데이터 세트 ID에 대해 데이터 프로필을 내보낼 프로젝트의 기존 데이터 세트 이름을 입력합니다.

   • 테이블 ID에 대해 데이터 프로필을 내보낼 BigQuery 테이블의 이름을 입력합니다. 이 테이블을 만들지 않았으면 제공된 이름을 사용해서 Sensitive Data Protection이 자동으로 만듭니다.

Sensitive Data Protection은 이 옵션을 사용 설정한 시점부터 프로필을 내보내기 시작합니다. 내보내기를 사용 설정하기 전에 생성된 프로필은 BigQuery에 저장되지 않습니다.

참고: 프로젝트와 연결된 서비스 에이전트에는 출력 테이블에 대한 쓰기 액세스가 있어야 합니다.

Pub/Sub에 게시

Pub/Sub에 게시를 사용 설정하면 프로파일링 결과를 기반으로 프로그래매틱 작업을 수행할 수 있습니다. Pub/Sub 알림을 사용하여 심각한 데이터 위험 또는 민감성이 포함된 발견 항목을 포착하고 해결하는 워크플로를 개발할 수 있습니다.

Pub/Sub 주제로 알림을 전송하려면 다음 단계를 수행합니다.

1. Pub/Sub에 게시를 사용 설정합니다.

   옵션 목록이 나타납니다. 각 옵션에서 Sensitive Data Protection이 Pub/Sub에 알림을 보내도록 유도하는 이벤트를 설명합니다.

2. Pub/Sub 알림을 트리거할 이벤트를 선택합니다.

   프로필이 업데이트될 때마다 Pub/Sub 알림 전송을 선택하면 Sensitive Data Protection이 프로필의 민감도 수준, 데이터 위험 수준, 감지된 infoType, 공개 액세스, 기타 중요한 측정항목에 변경사항이 있을 때 알림을 전송합니다.

3. 선택한 이벤트마다 다음 단계를 따르세요.

   1. 주제 이름을 입력합니다. 이름은 다음 형식이어야 합니다.

      projects/PROJECT_ID/topics/TOPIC_ID
      

      다음을 바꿉니다.

      • PROJECT_ID: Pub/Sub 주제와 연결된 프로젝트의 ID입니다.
      • TOPIC_ID: Pub/Sub 주제의 ID입니다.

   2. 알림에 전체 데이터 세트 프로필을 포함할지 아니면 프로파일링된 데이터 세트의 전체 리소스 이름만 포함할지를 지정합니다.

   3. Sensitive Data Protection이 알림을 전송하기 위해 충족되어야 하는 최소한의 데이터 위험 및 민감도 수준을 설정합니다.

   4. 데이터 위험 및 민감도 조건을 하나만 충족하면 되는지, 아니면 둘 다 충족해야 하는지 지정합니다. 예를 들어 AND를 선택하는 경우 Sensitive Data Protection이 알림을 전송하려면 먼저 데이터 위험 및 민감도 조건을 모두 충족해야 합니다.

참고: 프로젝트와 연결된 서비스 에이전트에 Pub/Sub 주제에 대한 게시 액세스 권한이 있어야 합니다. 게시 액세스 권한이 있는 역할의 예시로는 Pub/Sub 게시자 역할(roles/pubsub.publisher)이 있습니다. Pub/Sub 주제에 구성 문제나 권한 문제가 있으면 Sensitive Data Protection에서 최대 2주 동안 Pub/Sub 알림 전송을 재시도합니다. 2주 후에 알림이 삭제됩니다.

구성을 저장할 위치 설정

리소스 위치 목록을 클릭하고 이 스캔 구성을 저장할 리전을 선택합니다. 나중에 만드는 모든 스캔 구성도 이 위치에 저장됩니다.

스캔 구성을 저장하는 위치는 스캔되는 데이터에는 영향을 주지 않습니다. 데이터는 데이터가 저장된 리전과 동일한 리전에서 스캔됩니다. 자세한 내용은 데이터 상주 고려사항을 참조하세요.

참고: 기존 스캔 구성이 이미 있으면 이 필드에 설정된 값을 변경할 수 없습니다. 모든 스캔 구성은 동일한 위치에 저장됩니다. 모든 스캔 구성의 위치를 변경하려면 구성을 삭제하고 다시 만든 후 새 위치에 저장해야 합니다.

검토 및 만들기

1. 스캔 구성을 만든 후 프로파일링이 자동으로 시작되지 않도록 하려면 일시중지 모드에서 스캔 만들기를 선택합니다.

   이 옵션은 다음과 같은 경우에 유용합니다.

   • 데이터 프로필을 BigQuery에 저장하도록 선택했고 서비스 에이전트가 출력 테이블에 대한 쓰기 액세스 권한을 갖고 있는지 확인하고자 하는 경우
   • Pub/Sub 알림을 구성했고 서비스 에이전트에 게시 액세스 권한을 부여하려는 경우
2. 설정을 검토하고 만들기를 클릭합니다.

   민감한 정보 보호는 스캔 구성을 만들고 디스커버리 스캔 구성 목록에 추가합니다.

스캔 구성을 보거나 관리하려면 스캔 구성 관리를 참고하세요.

참고: Google에서는 감지 알고리즘을 정기적으로 개선합니다. Google에서 구현한 새로운 개선사항이 조직이나 프로젝트에 이점을 제공할 것으로 확인되면 데이터 프로필을 자동으로 다시 생성하고 스캔 구성의 작업을 다시 실행할 수 있습니다. 이 작업에 대한 Sensitive Data Protection 요금은 청구되지 않습니다. 하지만 작업을 다시 실행하므로 다른 Google Cloud 서비스 사용 요금이 청구될 수 있습니다. 예를 들어 데이터 프로필을 BigQuery에 저장하도록 Sensitive Data Protection을 구성한 경우 BigQuery 요금이 청구될 수 있습니다.

다음 단계

데이터 프로필을 관리하는 방법을 알아보세요.

스캔 구성 관리 방법 알아보기

데이터 프로파일러에서 게시한 Pub/Sub 메시지를 수신하고 파싱하는 방법 알아보기

데이터 프로필 문제 해결 방법 알아보기