Anthos Service Mesh와 IAP 통합

이 가이드에서는 Anthos Service Mesh와 IAP(Identity-Aware Proxy)를 통합하는 방법을 설명합니다. Anthos Service Mesh와 IAP를 통합하면 Google의 BeyondCorp 원칙에 따라 서비스에 안전하게 액세스할 수 있습니다. IAP는 사용자가 애플리케이션 또는 리소스에 액세스하도록 허용할지 결정하기 위해 요청의 사용자 ID와 컨텍스트를 확인합니다. Anthos Service Mesh와의 IAP 통합은 다음과 같은 이점을 제공합니다.

  • Anthos Service Mesh에서 실행되는 워크로드에 대한 컨텍스트 인식 액세스 제어를 완료합니다. 사용자 ID, IP 주소, 기기 유형과 같은 원래 요청의 속성을 기반으로 세분화된 액세스 정책을 설정할 수 있습니다. 요청 URL의 호스트 이름 및 경로에 따라 액세스 정책을 제한사항과 결합할 수 있습니다.

  • Anthos Service Mesh 승인에서 컨텍스트 인식 클레임 지원을 사용 설정합니다.

  • Google Cloud 부하 분산기를 통한 확장 가능하고 안전하며 가용성이 높은 애플리케이션 액세스. 고성능 부하 분산은 기본적으로 DDoS 공격에 대한 보호 및 전역 Anycast IP 주소 지정을 제공합니다.

목표

  • 다음을 설정합니다.
    1. Google Cloud 프로젝트를 설정하여 IAP에 필요한 권한을 부여하고 Google API를 사용 설정합니다.
    2. 외부 고정 IP 주소를 예약하고 부하 분산기에 필요한 IP 주소를 사용하도록 도메인 이름을 구성합니다.
    3. IAP를 Anthos Service Mesh와 통합하는 데 필요한 옵션으로 새 Google Kubernetes Engine(GKE) 클러스터를 설정합니다.
    4. 통합에 필요한 옵션으로 Anthos Service Mesh를 설치합니다.
    5. 샘플 애플리케이션을 배포합니다.
    6. 부하 분산기를 배포합니다.

  • IAP 사용 설정

  • 서비스 메시에서 RCToken 지원 사용 설정

비용

이 문서에서는 비용이 청구될 수 있는 다음과 같은 Google Cloud 구성요소를 사용합니다.

프로젝트 사용량을 기준으로 예상 비용을 산출하려면 가격 계산기를 사용하세요. Google Cloud를 처음 사용하는 사용자는 무료 체험판을 사용할 수 있습니다.

이 문서에 설명된 태스크를 완료했으면 만든 리소스를 삭제하여 청구가 계속되는 것을 방지할 수 있습니다. 자세한 내용은 삭제를 참조하세요.

시작하기 전에

요구사항

  • Anthos 무료 체험판 라이선스 또는 구독이 필요합니다. 자세한 내용은 Anthos 가격 책정 가이드를 참조하세요.

  • GKE 클러스터는 다음 요구사항을 충족해야 합니다.

    • 최소 4개 이상의 노드.
    • 최소 머신 유형은 4개의 vCPU가 있는 e2-standard-4입니다.
    • 정적 GKE 버전 대신 출시 채널을 사용합니다.

  • 서비스 메시에 포함하려면 서비스 포트의 이름이 지정되어야 하며 이름은 name: protocol[-suffix] 구문에서 포트 프로토콜을 포함해야 합니다. 여기서 대괄호는 대시로 시작해야 하는 선택적 서픽스를 나타냅니다. 자세한 내용은 서비스 포트 이름 지정을 참조하세요.

  • 비공개 클러스터에서 Anthos Service Mesh를 설치하는 경우 자동 사이드카 삽입을 사용하려면 포트 15017을 열도록 방화벽 규칙을 추가해야 합니다. 방화벽 규칙을 추가하지 않고 자동 사이드카 삽입이 사용 설정되어 있으면 워크로드를 배포할 때 오류가 발생합니다. 방화벽 규칙 추가에 대한 세부정보는 특정 사용 사례에 대한 방화벽 규칙 추가를 참조하세요.

  • 조직에서 서비스 경계를 만든 경우 경계에 Mesh CA 서비스를 추가해야 할 수도 있습니다. 자세한 내용은 서비스 경계에 Mesh CA 추가를 참조하세요.

환경 설정

Google Kubernetes Engine에 설치하는 경우 Google Cloud 리소스에 대한 브라우저 내 명령줄 인터페이스인 Cloud Shell 또는 Linux나 macOS를 실행하는 자체 컴퓨터를 사용하여 설치 가이드를 따를 수 있습니다.

옵션 A: Cloud Shell 사용

Cloud Shell은 Debian 기반 Linux 운영체제를 실행하는 g1-small Compute Engine 가상 머신(VM)을 프로비저닝합니다. Cloud Shell 사용의 장점은 다음과 같습니다.

  • Cloud Shell에는 필요한 gcloud, kubectl, helm 명령줄 도구가 포함되어 있습니다.

  • Cloud Shell $HOME 디렉터리에는 5GB의 영구 저장공간이 있습니다.

  • 다음과 같은 텍스트 편집기를 선택할 수 있습니다.

    • Cloud Shell 창 상단에 있는 ''를 클릭하여 액세스할 수 있는 코드 편집기

    • Cloud Shell의 명령줄에서 액세스할 수 있는 Eacs, Vim 또는 Nano

Cloud Shell을 사용하려면 다음 안내를 따르세요.

  1. Google Cloud 콘솔로 이동합니다.
  2. Google Cloud 프로젝트를 선택합니다.

  3. Google Cloud 콘솔 창 상단에 있는 Cloud Shell 활성화 버튼을 클릭합니다.

    Google Cloud Platform Console

    Google Cloud 콘솔 하단의 새 프레임에서 Cloud Shell 세션이 열리고 명령줄 프롬프트가 표시됩니다.

    Cloud Shell 세션

  4. 구성요소를 업데이트합니다.

    gcloud components update

    이 명령어는 다음과 유사한 출력으로 응답합니다.

    ERROR: (gcloud.components.update)
You cannot perform this action because the gcloud CLI component manager
is disabled for this installation. You can run the following command
to achieve the same result for this installation:

sudo apt-get update && sudo apt-get --only-upgrade install ...

  5. long 명령어를 복사하고 붙여넣어 구성요소를 업데이트합니다.

  6. kubectl을 설치합니다.

    sudo apt-get install kubectl

  7. kpt를 설치합니다.

    sudo apt-get install google-cloud-sdk-kpt

옵션 B: 로컬에서 명령줄 도구 사용

로컬 머신에서 gcloud CLI를 설치하고 초기화합니다.

  1. Google Cloud CLI로 인증합니다.

    gcloud auth login

  2. 구성요소를 업데이트합니다.

    gcloud components update

  3. kubectl을 설치합니다.

    gcloud components install kubectl

  4. kpt을 설치합니다.

    gcloud components install kpt

프로젝트 설정

  1. 클러스터가 생성될 프로젝트의 프로젝트 ID를 가져옵니다.

    gcloud

    gcloud projects list

    콘솔

    1. Google Cloud 콘솔에서 대시보드 페이지로 이동합니다.

      대시보드 페이지로 이동

    2. 페이지 상단에서 선택 드롭다운 목록을 클릭합니다. 선택 창이 나타나면 프로젝트를 선택합니다.

      프로젝트 ID가 프로젝트 대시보드 프로젝트 정보 카드에 표시됩니다.

  2. 프로젝트 ID의 환경 변수를 만듭니다.
    export PROJECT_ID=YOUR_PROJECT_ID
  3. gcloud 명령줄 도구의 기본 프로젝트 ID를 설정합니다. 
    gcloud config set project ${PROJECT_ID}
  4. 프로젝트 번호의 환경 변수를 만듭니다.
    export PROJECT_NUMBER=$(gcloud projects describe ${PROJECT_ID} --format="value(projectNumber)")

  5. 필요한 ID 및 액세스 관리(IAM) 역할을 설정합니다. 프로젝트 소유자인 경우 설치를 완료하고 Environ에 클러스터를 등록하는 데 필요한 모든 권한이 있습니다. 프로젝트 소유자가 아닌 경우 다음과 같은 특정 IAM 역할을 부여할 사람이 필요합니다. 다음 명령어에서 GCP_EMAIL_ADDRESS를 Google Cloud에 로그인하는 데 사용하는 계정으로 변경합니다. 
    gcloud projects add-iam-policy-binding ${PROJECT_ID} \
     --member user:GCP_EMAIL_ADDRESS \
     --role=roles/editor \
     --role=roles/compute.admin \
     --role=roles/container.admin \
     --role=roles/resourcemanager.projectIamAdmin \
     --role=roles/iam.serviceAccountAdmin \
     --role=roles/iam.serviceAccountKeyAdmin \
     --role=roles/gkehub.admin

    IAM 역할을 부여하는 방법에 대한 자세한 내용은 리소스에 대한 액세스 권한 부여, 변경, 취소를 참조하세요. 이러한 역할에 대한 설명은 Anthos Service Mesh를 설치하는 데 필요한 권한을 참조하세요.

  6. 다음 API를 사용 설정합니다. 
    gcloud services enable \
    container.googleapis.com \
    compute.googleapis.com \
    monitoring.googleapis.com \
    logging.googleapis.com \
    cloudtrace.googleapis.com \
    meshca.googleapis.com \
    meshtelemetry.googleapis.com \
    meshconfig.googleapis.com \
    iamcredentials.googleapis.com \
    anthos.googleapis.com \
    gkeconnect.googleapis.com \
    gkehub.googleapis.com \
    cloudresourcemanager.googleapis.com \
    iap.googleapis.com

    API를 사용 설정하려면 완료하는 데 1분 이상 걸릴 수 있습니다. API가 사용 설정되면 다음과 비슷한 출력이 표시됩니다.

    Operation "operations/acf.601db672-88e6-4f98-8ceb-aa3b5725533c" finished
successfully.

고정 IP 주소 예약 및 DNS 구성

IAP(Identity-Aware Proxy)를 Anthos Service Mesh와 통합하려면 고정 IP 주소를 가리키는 도메인 이름이 필요한 Google Cloud HTTP(S) 부하 분산기를 설정해야 합니다. 고정 외부 IP 주소를 예약할 수 있습니다. 그러면 해당 주소는 명시적으로 해제될 때까지 프로젝트에 무기한으로 할당됩니다.

  1. 정적 외부 IP 주소를 예약합니다.

    gcloud compute addresses create example-static-ip --global

  2. 고정 IP 주소를 가져옵니다.

    gcloud compute addresses describe example-static-ip --global

  3. 도메인 이름 등록기관에서 고정 IP 주소로 정규화된 도메인 이름(FQDN)을 구성합니다. 일반적으로 DNS 설정에 A 레코드를 추가합니다. FQDN의 A 레코드를 추가하기 위한 구성 단계와 용어는 도메인 이름 등록기관에 따라 다릅니다.

  4. 환경 변수에서 도메인 이름을 설정합니다.

    export DOMAIN_NAME=YOUR_DOMAIN_NAME

    DNS 설정이 적용되려면 24~48시간이 소요될 수 있습니다. 이 가이드의 모든 내용을 계속 설정할 수 있지만 DNS 설정이 적용될 때까지 설정을 테스트할 수 없습니다.

새 GKE 클러스터 설정

새 클러스터를 설정하는 방법은 다음과 같습니다.

  1. 새 클러스터의 영역, 머신 유형, GKE 출시 채널을 선택합니다. Anthos Service Mesh에 필요한 최소 머신 유형은 n1-standard-4입니다. 모든 출시 채널 옵션을 사용할 수 있습니다.

    • 사용 가능한 GCP 영역 목록을 가져오는 방법은 다음과 같습니다.

      gcloud compute zones list

    • 머신 유형 목록을 가져오는 방법은 다음과 같습니다.

      gcloud compute machine-types list | more

  2. 다음의 환경 변수를 만듭니다.

    • 클러스터 이름을 설정합니다.

      export CLUSTER_NAME=YOUR_CLUSTER_NAME

      클러스터 이름에는 소문자 영숫자 및 '-'만 포함되어야 하고 문자로 시작하고 영숫자로 끝나야 하며 40자를 초과할 수 없습니다.

    • CLUSTER_LOCATION을 클러스터 영역으로 설정합니다.

      export CLUSTER_LOCATION=YOUR_ZONE

    • 워크로드 풀을 설정합니다.

      export WORKLOAD_POOL=${PROJECT_ID}.svc.id.goog

    • 메시 ID를 설정합니다.

      export MESH_ID="proj-${PROJECT_NUMBER}"

  3. Anthos Service Mesh에서 필요한 옵션을 사용하여 클러스터를 만듭니다. 다음 명령어는 vCPU가 4개 있는 n1-standard-4 머신 유형의 노드 4개를 포함하는 클러스터를 만듭니다. Anthos Service Mesh에 필요한 최소 머신 유형 및 노드 수입니다. vCPU가 4개 이상인 다른 머신 유형을 지정할 수 있으며 시스템 요구사항에 따라 노드 수를 늘릴 수 있습니다.

    gcloud beta container clusters create ${CLUSTER_NAME} \
    --project=${PROJECT_ID} \
    --zone=${CLUSTER_LOCATION} \
    --machine-type=n1-standard-4 \
    --num-nodes=4 \
    --workload-pool=${WORKLOAD_POOL} \
    --enable-stackdriver-kubernetes \
    --subnetwork=default \
    --labels mesh_id=${MESH_ID} \
    --addons=HttpLoadBalancing \
    --release-channel=regular

    clusters create 명령어에는 다음이 포함됩니다.

    • workload-pool=${WORKLOAD_POOL}: GKE 애플리케이션에서 Google Cloud 서비스에 안전하게 액세스하는 데 권장되는 워크로드 아이덴티티를 사용 설정합니다.

    • enable-stackdriver-kubernetes: GKE에서 Cloud Monitoring 및 Cloud Logging을 사용 설정합니다.

    • subnetwork=default: 기본 서브네트워크를 만듭니다.

    • labels mesh_id=${MESH_ID}: Google Cloud Console의 Anthos Service Mesh 대시보드에 측정항목을 표시하는 데 필요한 mesh_id 라벨을 클러스터에서 설정합니다.

    • HttpLoadBalancing 부가기능은 클러스터에 HTTP(L7) 부하 분산 컨트롤러를 사용 설정합니다.

    • release-channel regular: 클러스터를 regular 출시 채널에 등록합니다. 그러나 안정성이 더 필요하면 stable을 선택하고 새로운(지원되지 않는) GKE 기능을 사용해 보려면 rapid를 선택할 수 있습니다.

사용자 인증 정보 및 권한 설정

  1. 프로젝트를 설치할 수 있도록 초기화합니다. 무엇보다도 이 명령어는 사이드카 프록시와 같은 Istio 구성요소가 프로젝트의 데이터 및 리소스에 안전하게 액세스할 수 있도록 서비스 계정을 만듭니다. 
    curl --request POST \
  --header "Authorization: Bearer $(gcloud auth print-access-token)" \
  --data '' \
  https://meshconfig.googleapis.com/v1alpha1/projects/${PROJECT_ID}:initialize

    이 명령어는 빈 중괄호({})를 사용하여 응답합니다.

    나중에 이 클러스터에 새 버전의 Anthos Service Mesh를 설치하는 경우에는 명령어를 다시 실행할 필요가 없지만 명령어를 다시 실행해도 설치에 영향을 주지 않습니다.

  2. 클러스터와 상호작용하기 위해 사용자 인증 정보를 가져옵니다.
    gcloud container clusters get-credentials ${CLUSTER_NAME}
  3. 클러스터 관리자 권한을 현재 사용자에게 부여합니다. Anthos Service Mesh에 필요한 역할 기반 액세스 제어(RBAC) 규칙을 만들려면 이러한 권한이 필요합니다. 
    kubectl create clusterrolebinding cluster-admin-binding \
  --clusterrole=cluster-admin \
  --user="$(gcloud config get-value core/account)"

    "cluster-admin-binding" already exists 오류가 표시되면 안전하게 무시하고 기존 cluster-admin-binding을 계속 진행할 수 있습니다.

클러스터 등록

Google Cloud 콘솔에서 통합 사용자 인터페이스에 액세스하려면 프로젝트 Fleet에 클러스터를 등록해야 합니다. Fleet에서는 Google Cloud 외부의 클러스터를 포함하여 클러스터와 워크로드를 통합된 방식으로 보고 관리할 수 있습니다.

Google Cloud 서비스 계정 및 키 파일 만들기

클러스터를 등록하려면 서비스 계정 사용자 인증 정보가 포함된 JSON 파일이 필요합니다. 최소 권한의 원칙을 따르려면 등록한 클러스터마다 별도의 서비스 계정을 만드는 것이 좋습니다.

서비스 계정 및 키 파일을 만들려면 다음 안내를 따르세요.

  1. 서비스 계정의 이름을 선택하고 환경 변수를 만듭니다.

    export SERVICE_ACCOUNT_NAME=SERVICE_ACCOUNT_NAME

  2. 서비스 계정을 만듭니다.

    gcloud iam service-accounts create ${SERVICE_ACCOUNT_NAME}

  3. 프로젝트의 모든 서비스 계정을 나열하여 서비스 계정이 생성되었는지 확인합니다.

    gcloud iam service-accounts list

  4. gkehub.connect IAM 역할을 서비스 계정에 바인딩합니다.

    gcloud projects add-iam-policy-binding ${PROJECT_ID} \
   --member="serviceAccount:${SERVICE_ACCOUNT_NAME}@${PROJECT_ID}.iam.gserviceaccount.com" \
   --role="roles/gkehub.connect"

  5. JSON 파일을 저장할 로컬 파일 경로의 환경 변수를 만듭니다. 서비스 계정 이름과 프로젝트 ID를 사용하여 파일 이름을 지정하는 것이 좋습니다. 예를 들면 /tmp/creds/${SERVICE_ACCOUNT_NAME}-${PROJECT_ID}.json입니다.

    export SERVICE_ACCOUNT_KEY_PATH=LOCAL_KEY_PATH

  6. 서비스 계정의 비공개 키 JSON 파일을 다운로드합니다.

    gcloud iam service-accounts keys create ${SERVICE_ACCOUNT_KEY_PATH} \
   --iam-account=${SERVICE_ACCOUNT_NAME}@${PROJECT_ID}.iam.gserviceaccount.com

클러스터 등록

다음 명령어에서 MEMBERSHIP_NAME을 허브에 등록하려는 클러스터를 고유하게 나타내는 이름으로 바꿉니다.

gcloud container hub memberships register MEMBERSHIP_NAME \
    --gke-cluster=${CLUSTER_LOCATION}/${CLUSTER_NAME} \
    --service-account-key-file=${SERVICE_ACCOUNT_KEY_PATH}

이 명령어는 다음과 유사한 출력으로 응답합니다. 

kubeconfig entry generated for CLUSTER_NAME.
Waiting for membership to be created...done.
Created a new membership [projects/PROJECT_ID/locations/global/memberships/MEMBERSHIP_NAME] for the cluster [MEMBERSHIP_NAME]
Generating the Connect Agent manifest...
Deploying the Connect Agent on cluster [MEMBERSHIP_NAME] in namespace [gke-connect]...
Deployed the Connect Agent on cluster [MEMBERSHIP_NAME] in namespace [gke-connect].
Finished registering the cluster [MEMBERSHIP_NAME] with the Hub.

이 서비스 계정 키는 gke-connect 네임스페이스에 creds-gcp라는 보안 비밀로 저장됩니다.

클러스터 등록에 대한 자세한 내용은 연결 문서의 클러스터 등록을 참조하세요.

설치 파일 다운로드

계속하기 전에 먼저 ASM Mesh Data Plane Service Account가 프로젝트의 구성원인지 확인합니다.

gcloud projects get-iam-policy ${PROJECT_ID} | grep -B 1 'roles/meshdataplane.serviceAgent'

이전 명령어가 아무것도 출력하지 않으면 사용자 인증 정보 및 권한 설정 섹션으로 돌아가서 curl 명령어를 실행합니다.

    Linux

  1. Anthos Service Mesh 설치 파일을 현재 작업 디렉터리에 다운로드합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-linux.tar.gz
  2. 서명 파일을 다운로드하고 openssl을 사용하여 서명을 확인합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-linux.tar.gz.1.sig
openssl dgst -verify - -signature istio-1.5.10-asm.2-linux.tar.gz.1.sig istio-1.5.10-asm.2-linux.tar.gz <<'EOF'
-----BEGIN PUBLIC KEY-----
MFkwEwYHKoZIzj0CAQYIKoZIzj0DAQcDQgAEWZrGCUaJJr1H8a36sG4UUoXvlXvZ
wQfk16sxprI2gOJ2vFFggdq3ixF2h4qNBt0kI7ciDhgpwS8t+/960IsIgw==
-----END PUBLIC KEY-----
EOF

    예상되는 출력은 Verified OK입니다.

  3. 원하는 파일 시스템 위치에 파일 콘텐츠 압축을 풉니다. 예를 들어 콘텐츠를 현재 작업 디렉터리에 추출하려면 다음을 사용하세요. 
    tar xzf istio-1.5.10-asm.2-linux.tar.gz

    이 명령어는 다음을 포함하는 현재 작업 디렉터리에 istio-1.5.10-asm.2이라는 설치 디렉터리를 만듭니다.

    • samples의 샘플 애플리케이션
    • bin 디렉터리에 있는 다음 도구:
      • istioctl: istioctl을 사용하여 Anthos Service Mesh를 설치합니다.
      • asmctl: Anthos Service Mesh를 설치한 후 보안 구성을 검증하기 위해 asmctl을 사용합니다. 현재 VMware용 Anthos 클러스터에서는 asmctl이 지원되지 않습니다.

    4. MacOS

  4. Anthos Service Mesh 설치 파일을 현재 작업 디렉터리에 다운로드합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-osx.tar.gz
  5. 서명 파일을 다운로드하고 openssl을 사용하여 서명을 확인합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-osx.tar.gz.1.sig
openssl dgst -sha256 -verify /dev/stdin -signature istio-1.5.10-asm.2-osx.tar.gz.1.sig istio-1.5.10-asm.2-osx.tar.gz <<'EOF'
-----BEGIN PUBLIC KEY-----
MFkwEwYHKoZIzj0CAQYIKoZIzj0DAQcDQgAEWZrGCUaJJr1H8a36sG4UUoXvlXvZ
wQfk16sxprI2gOJ2vFFggdq3ixF2h4qNBt0kI7ciDhgpwS8t+/960IsIgw==
-----END PUBLIC KEY-----
EOF

    예상되는 출력은 Verified OK입니다.

  6. 원하는 파일 시스템 위치에 파일 콘텐츠 압축을 풉니다. 예를 들어 콘텐츠를 현재 작업 디렉터리에 추출하려면 다음을 사용하세요. 
    tar xzf istio-1.5.10-asm.2-osx.tar.gz

    이 명령어는 다음을 포함하는 현재 작업 디렉터리에 istio-1.5.10-asm.2이라는 설치 디렉터리를 만듭니다.

    • samples의 샘플 애플리케이션
    • bin 디렉터리에 있는 다음 도구:
      • istioctl: istioctl을 사용하여 Anthos Service Mesh를 설치합니다.
      • asmctl: Anthos Service Mesh를 설치한 후 보안 구성을 검증하기 위해 asmctl을 사용합니다. 현재 VMware용 Anthos 클러스터에서는 asmctl이 지원되지 않습니다.

    7. Windows

  7. Anthos Service Mesh 설치 파일을 현재 작업 디렉터리에 다운로드합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-win.zip
  8. 서명 파일을 다운로드하고 openssl을 사용하여 서명을 확인합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-win.zip.1.sig
openssl dgst -verify - -signature istio-1.5.10-asm.2-win.zip.1.sig istio-1.5.10-asm.2-win.zip <<'EOF'
-----BEGIN PUBLIC KEY-----
MFkwEwYHKoZIzj0CAQYIKoZIzj0DAQcDQgAEWZrGCUaJJr1H8a36sG4UUoXvlXvZ
wQfk16sxprI2gOJ2vFFggdq3ixF2h4qNBt0kI7ciDhgpwS8t+/960IsIgw==
-----END PUBLIC KEY-----
EOF

    예상되는 출력은 Verified OK입니다.

  9. 원하는 파일 시스템 위치에 파일 콘텐츠 압축을 풉니다. 예를 들어 콘텐츠를 현재 작업 디렉터리에 추출하려면 다음을 사용하세요. 
    tar xzf istio-1.5.10-asm.2-win.zip

    이 명령어는 다음을 포함하는 현재 작업 디렉터리에 istio-1.5.10-asm.2이라는 설치 디렉터리를 만듭니다.

    • samples의 샘플 애플리케이션
    • bin 디렉터리에 있는 다음 도구:
      • istioctl: istioctl을 사용하여 Anthos Service Mesh를 설치합니다.
      • asmctl: Anthos Service Mesh를 설치한 후 보안 구성을 검증하기 위해 asmctl을 사용합니다. 현재 VMware용 Anthos 클러스터에서는 asmctl이 지원되지 않습니다.

  10. Anthos Service Mesh 설치 루트 디렉터리에 있는지 확인합니다.
    cd istio-1.5.10-asm.2
  11. 편의를 위해 /bin 디렉터리의 도구를 PATH에 추가합니다.
    export PATH=$PWD/bin:$PATH

리소스 구성 파일 준비

istioctl apply command를 실행하여 Anthos Service Mesh를 설치하려면 명령줄에서 -f istio-operator.yaml을 지정합니다. 이 파일에는 메시 원격 분석 및 메시 보안 기능을 사용 설정하는 데 필요한 프로젝트 및 클러스터에 대한 정보가 포함되어 있습니다. istio-operator.yaml 및 기타 리소스 구성 파일을 다운로드하고 프로젝트 및 클러스터 정보를 설정해야 합니다.

리소스 구성 파일을 준비하려면 다음 안내를 따르세요.

  1. 아직 설치하지 않았다면 kpt를 설치합니다.

    gcloud components install kpt

  2. 선택적으로 Anthos Service Mesh 패키지 리소스 구성 파일을 위한 새 디렉터리를 만듭니다. 2개 이상의 클러스터를 설정하려는 경우 클러스터 이름을 디렉터리 이름으로 사용하는 것이 좋습니다.

  3. Anthos Service Mesh 패키지를 다운로드할 디렉터리로 변경합니다.

  4. Anthos Service Mesh 패키지를 현재 작업 디렉터리에 다운로드합니다.

    kpt pkg get \
https://github.com/GoogleCloudPlatform/anthos-service-mesh-packages.git/asm@release-1.5-asm .

  5. 클러스터 이름을 설정합니다.

      kpt cfg set asm gcloud.container.cluster ${CLUSTER_NAME}

  6. 필요한 경우 kpt setter를 사용하여 리소스 구성 파일을 맞춤설정합니다. 기본적으로 이러한 setter는 gcloud config의 기본값을 사용합니다. gcloud config 기본값을 설정하거나 값을 변경하려면 다음 setter를 실행합니다.

    • 프로젝트 ID를 설정합니다.

      kpt cfg set asm gcloud.core.project ${PROJECT_ID}

    • 기본 영역 또는 리전을 설정합니다.

      kpt cfg set asm gcloud.compute.location ${CLUSTER_LOCATION}

  7. 원하는 경우 Cloud Source Repositories와 같은 자체 소스 제어 시스템에 리소스 구성 파일을 대조하여 파일의 변경사항을 추적할 수 있습니다.

Anthos Service Mesh 설치

Anthos Service Mesh를 설치하고 Anthos Service Mesh를 IAP와 통합하는 데 필요한 옵션을 설정합니다.

PERMISSIVE mTLS

istioctl manifest apply --set profile=asm \
  -f asm/cluster/istio-operator.yaml \
  --set values.gateways.istio-ingressgateway.type=NodePort

STRICT mTLS

istioctl manifest apply --set profile=asm \
  -f asm/cluster/istio-operator.yaml \
  --set values.gateways.istio-ingressgateway.type=NodePort \
  --set values.global.mtls.enabled=true

istio-ingressgateway에 NodePort를 지정하여 서비스 메시의 특정 포트를 열도록 {[mesh_name]}을 구성합니다. 이렇게 하면 도메인 이름으로 전송된 트래픽을 이 포트로 라우팅하도록 부하 분산기를 설정할 수 있습니다. 다른 옵션은 Anthos Service Mesh 인증 기관(Mesh CA)을 사용 설정합니다.

설치 검증

asmctl 분석 도구를 사용하여 프로젝트, 클러스터, 워크로드의 기본 구성을 검증하는 것이 좋습니다. asmctl 테스트가 실패하면 asmctl에서 가능한 경우 해결책을 권장합니다. asmctl validate 명령어는 다음을 확인하는 기본 테스트를 실행합니다.

  1. Anthos Service Mesh에 필요한 API가 프로젝트에 사용 설정되어 있는지 여부
  2. Istio-Ingressgateway가 Mesh CA를 호출하도록 올바르게 구성되어 있는지 여부
  3. Istiod 및 Istio-Ingressgateway의 전반적인 상태

선택사항인 --with-testing-workloads 플래그를 사용하여 asmctl validate 명령어를 실행하면 기본 테스트 외에도 asmctl이 다음을 확인하는 보안 테스트를 실행합니다.

  1. 상호 TLS(mTLS) 통신이 올바르게 구성되었습니다.
  2. Mesh CA는 인증서를 발급할 수 있습니다.

보안 테스트를 실행하기 위해 asmctl은 클러스터의 워크로드를 테스트 네임스페이스에 배포하고 mTLS 통신 테스트를 실행하며 결과를 출력하고 테스트 네임스페이스를 삭제합니다.

asmctl을 실행하려면 다음 안내를 따르세요.

  1. gcloud 애플리케이션 기본 사용자 인증 정보가 설정되어 있는지 확인합니다.

     gcloud auth application-default login

  2. 아직 하지 않은 경우 사용자 인증 정보를 가져와 클러스터와 상호작용합니다.

     gcloud container clusters get-credentials ${CLUSTER_NAME}

  3. PATH에 istio-1.5.10-asm.2/bin이 있는 경우 기본 및 보안 테스트를 모두 실행하려면 다음을 입력하세요.

    asmctl validate --with-testing-workloads

    성공하면 다음과 비슷한 출력이 표시됩니다.

    [asmctl version 0.3.0]
Using Kubernetes context: example-project_us-central1-example-cluster
To change the context, use the --context flag
Validating enabled APIs
OK
Validating ingressgateway configuration
OK
Validating istio system
OK
Validating sample traffic
Launching example services...
Sent traffic to example service http code: 200
verified mTLS configuration
OK
Validating issued certs
OK

샘플 애플리케이션 배포

IAP를 사용 설정하기 전에 모든 요청에 ID가 있는지 확인할 수 있도록 GKE 클러스터에서 실행되는 애플리케이션이 필요합니다. 이 가이드에서는 Bookinfo 샘플을 사용하여 HTTP(S) 부하 분산기를 설정하고 IAP를 사용 설정하는 방법을 보여줍니다.

애플리케이션 서비스 시작

  1. 디렉터리를 Anthos Service Mesh 설치의 루트로 변경합니다.

  2. 자동 사이드카 삽입을 사용하도록 default 네임스페이스에 라벨을 지정합니다.

    kubectl label namespace default istio-injection=enabled

  3. 애플리케이션 배포

    kubectl apply -f samples/bookinfo/platform/kube/bookinfo.yaml

  4. 모든 bookinfo 서비스가 실행 중인지 확인합니다.

    kubectl get services

    예상 출력은 다음과 비슷합니다.

    NAME                       CLUSTER-IP   EXTERNAL-IP   PORT(S)              AGE
details                    10.0.0.31            9080/TCP             6m
kubernetes                 10.0.0.1             443/TCP              7d
productpage                10.0.0.120           9080/TCP             6m
ratings                    10.0.0.15            9080/TCP             6m
reviews                    10.0.0.170           9080/TCP             6m

  5. 모든 pod가 실행 중인지 확인합니다.

    kubectl get pods

    예상 출력은 다음과 비슷합니다.

    NAME                                        READY     STATUS    RESTARTS   AGE
details-v1-1520924117-48z17                 2/2       Running   0          6m
productpage-v1-560495357-jk1lz              2/2       Running   0          6m
ratings-v1-734492171-rnr5l                  2/2       Running   0          6m
reviews-v1-874083890-f0qf0                  2/2       Running   0          6m
reviews-v2-1343845940-b34q5                 2/2       Running   0          6m
reviews-v3-1813607990-8ch52                 2/2       Running   0          6m

  6. Bookinfo 애플리케이션이 실행 중인지 확인합니다.

    kubectl exec -it $(kubectl get pod -l app=ratings -o jsonpath='{.items[0].metadata.name}') -c ratings -- curl productpage:9080/productpage | grep -o "<title>.*</title>"

    예상 출력:

    <title>Simple Bookstore App</title>

  7. 애플리케이션의 인그레스 게이트웨이와 가상 서비스를 정의합니다.

    kubectl apply -f samples/bookinfo/networking/bookinfo-gateway.yaml

  8. 게이트웨이가 생성되었는지 확인합니다.

    kubectl get gateway

    예상 출력은 다음과 비슷합니다.

    NAME                AGE
bookinfo-gateway    32s

외부 요청

Bookinfo의 게이트웨이 리소스(samples/bookinfo/networking/bookinfo-gateway.yaml에 정의됨)는 사전 구성된 istio-ingressgateway를 사용합니다. Anthos Service Mesh를 배포 할 때 istio-ingressgateway에 NodePort를 지정하여 서비스 메시에서 특정 포트를 엽니다. 부하 분산기를 설정하기 전에는 GKE 클러스터 외부에서(예: 브라우저에서) Bookinfo 애플리케이션에 액세스할 수 없습니다. 클러스터의 노드에 외부 IP 주소가 있더라도 클러스터 외부에서 들어오는 요청은 Google Cloud 방화벽 규칙에 의해 차단됩니다. IAP를 사용하는 경우 부하 분산기를 사용하여 공개 인터넷에 해당 애플리케이션을 노출해야 합니다. IAP를 우회하는 방화벽 규칙을 사용하여 노드 주소를 노출하지 마세요.

요청을 Bookinfo로 라우팅하려면 Google Cloud 프로젝트에서 HTTP(S) 부하 분산기를 설정합니다. 부하 분산기가 프로젝트에 있으므로 방화벽 내에 있으며 클러스터의 노드에 액세스할 수 있습니다. 고정 IP 주소와 도메인 이름을 사용하여 부하 분산기를 구성한 후에는 도메인 이름으로 요청을 보낼 수 있고 부하 분산기가 요청을 클러스터의 노드로 전달합니다.

부하 분산기 배포

인그레스 리소스를 사용하여 자동으로 구성된 SSL 인증서로 HTTP(S) 부하 분산기를 만들 수 있습니다. 도메인 이름의 Google 관리 SSL 인증서가 프로비저닝, 갱신, 관리됩니다.

  1. ManagedCertificate 리소스를 만듭니다. 이 리소스는 SSL 인증서의 도메인을 지정합니다. spec.domains 목록에 도메인이 하나만 포함되어야 합니다. 와일드 카드 도메인은 지원되지 않습니다.

    cat <<EOF | kubectl apply -f -
apiVersion: networking.gke.io/v1beta1
kind: ManagedCertificate
metadata:
  name: example-certificate
  namespace: istio-system
spec:
  domains:
    - ${DOMAIN_NAME}
EOF

  2. 인그레스 리소스를 정의하여 부하 분산기를 만듭니다.

    • networking.gke.io/managed-certificates 주석을 이전 단계에서 만든 인증서 이름인 example-certificate으로 설정합니다.

    • kubernetes.io/ingress.global-static-ip-name 주석을 예약한 고정 IP 주소의 이름인 example-static-ip로 설정합니다.

    • serviceName을 Bookinfo 샘플의 게이트웨이 리소스에서 사용되는 istio-ingressgateway로 설정합니다.

    cat <<EOF | kubectl create -f -
apiVersion: extensions/v1beta1
kind: Ingress
metadata:
  name: example-ingress
  namespace: istio-system
  annotations:
    kubernetes.io/ingress.global-static-ip-name: example-static-ip
    networking.gke.io/managed-certificates: example-certificate
spec:
  backend:
    serviceName: istio-ingressgateway
    servicePort: 80
EOF

  3. Google Cloud 콘솔에서 Kubernetes Engine > 서비스 및 인그레스 페이지로 이동합니다.

    서비스 및 인그레스 페이지로 이동

    상태 열에 '인그레스 만들기' 메시지가 표시됩니다. 계속 진행하기 전에 GKE가 인그레스를 완전히 프로비저닝할 때까지 기다립니다. 몇 분마다 페이지를 새로고침하여 인그레스에 대한 최신 상태를 확인하세요. 인그레스가 프로비저닝되면 '확인' 상태 또는 '모든 백엔드 서비스가 비정상 상태'라는 오류가 표시될 수 있습니다. GKE가 프로비저닝하는 리소스 중 하나는 기본 상태 확인입니다. 오류 메시지가 표시되면 인그레스가 프로비저닝되고 기본 상태 확인이 실행되었음을 나타냅니다. '확인' 상태 또는 오류가 표시되면 다음 섹션을 진행하여 부하 분산기의 상태 확인을 구성합니다.

부하 분산기의 상태 확인 구성

상태 확인을 구성하려면 인그레스에서 만든 기본 상태 확인의 ID를 가져온 다음 istio-ingress의 상태 확인 경로 및 포트를 사용하도록 상태 확인을 업데이트해야 합니다.

  1. 애플리케이션 기본 사용자 인증 정보에 사용할 새로운 사용자 인증 정보를 가져옵니다.

      gcloud auth application-default login

  2. 인그레스에서 생성된 기본 상태 확인의 ID를 가져옵니다.

    1. 다음 환경 변수를 설정합니다.

      • 백엔드 서비스: 지정된 서비스 NodePort의 여러 인스턴스 그룹을 연결합니다.

        BACKEND_SERVICE=$(gcloud compute url-maps list | grep example-ingress | awk '{print $2}' | cut -d'/' -f 2)

      • 상태 확인: 인그레스가 배포될 때 자동으로 생성되는 기본 상태 확인입니다.

        HC=$(gcloud compute backend-services describe ${BACKEND_SERVICE} --global | grep healthChecks | cut -d'/' -f 10 | tail -n 1)

      • 상태 확인 인그레스 포트: istio-ingress의 상태 확인 포트입니다.

        export HC_INGRESS_PORT=$(kubectl -n istio-system get service istio-ingressgateway -o jsonpath='{.spec.ports[?(@.name=="status-port")].nodePort}')

      • 상태 확인 인그레스 경로: istio-ingress의 상태 확인 경로입니다.

        export HC_INGRESS_PATH=$(kubectl -n istio-system get deployments istio-ingressgateway -o jsonpath='{.spec.template.spec.containers[?(@.name=="istio-proxy")].readinessProbe.httpGet.path}')

      • 상태 확인 API: 상태 확인을 구성하기 위해 호출하는 API입니다.
        export HC_API=https://compute.googleapis.com/compute/v1/projects/${PROJECT_ID}/global/healthChecks/${HC}

    2. healthChecks API를 호출하여 기본 상태 확인을 JSON 파일로 가져옵니다.

      curl --request GET  --header "Authorization: Bearer $(gcloud auth application-default print-access-token)" ${HC_API} > health_check.json

  3. 상태 확인을 업데이트하여 istio-ingress의 상태 확인 경로 및 포트를 사용합니다.

    1. 다음과 같이 health_check.json 파일을 업데이트합니다.

      • httpHealthCheck.port를 ${HC_INGRESS_PORT} 값으로 설정합니다.
      • httpHealthCheck.requestPath를 ${HC_INGRESS_PATH} 값으로 설정합니다.
      • httpHealthCheck.portSpecification="" 속성을 추가하고 빈 문자열로 설정합니다.

      이를 수행하는 가장 쉬운 방법은 Cloud Shell에 사전 설치되어 제공되는 jq를 사용하는 것입니다.

      jq ".httpHealthCheck.port=${HC_INGRESS_PORT} | .httpHealthCheck.requestPath=\"${HC_INGRESS_PATH}\" | .httpHealthCheck.portSpecification=\"\"" health_check.json > updated_health_check.json

      결과로 생성되는 updated_health_check.json 파일에서 cat을 실행하면 다음과 비슷하게 표시됩니다.

      {
"id": "5062913090021441698",
"creationTimestamp": "2019-11-12T10:47:41.934-08:00",
"name": "${HC}",
"description": "Default kubernetes L7 Loadbalancing health check.",
"checkIntervalSec": 60,
"timeoutSec": 60,
"unhealthyThreshold": 10,
"healthyThreshold": 1,
"type": "HTTP",
"httpHealthCheck": {
  "port": 32394,
  "requestPath": "/healthz/ready",
  "proxyHeader": "NONE",
  "portSpecification": ""
},
"selfLink": "https://www.googleapis.com/compute/v1/projects/${PROJECT_ID}/global/healthChecks/${HC}",
"kind": "compute#healthCheck"
}

      jq 명령어를 사용하는 대신 JSON 파일을 수동으로 수정한 경우 다음 명령어의 파일 이름과 일치하도록 파일을 updated_health_check.json으로 저장합니다.

    2. 상태 확인을 업데이트합니다.

      curl --request PATCH --header "Authorization: Bearer $(gcloud auth application-default print-access-token)" --header "Content-Type: application/json" --data @updated_health_check.json ${HC_API}

    GKE가 상태 확인을 업데이트하는 데 몇 분 정도 걸립니다. Google Cloud Console에서 인그레스 상태가 '확인'으로 변경될 때까지 1분 간격으로 Kubernetes Engine > 서비스 및 인그레스 페이지를 새로 고칩니다.

  4. 부하 분산기를 테스트합니다. 브라우저에서 다음으로 이동합니다.

    http://YOUR_DOMAIN_NAME/productpage

    여기서 YOUR_DOMAIN_NAME은 외부 고정 IP 주소로 구성한 도메인 이름입니다.

    Bookinfo 애플리케이션의 productpage가 표시됩니다. 페이지를 여러 번 새로고침하면 여러 버전의 리뷰가 라운드 로빈 스타일로 표시됩니다(빨간색 별, 검은색 별, 별 없음).

    Bookinfo에 대한 https 액세스 권한도 테스트해야 합니다.

IAP 사용 설정

다음 단계에서는 IAP를 사용 설정하는 방법을 설명합니다.

  1. list 명령어를 사용하여 기존 브랜드가 있는지 확인합니다. 프로젝트당 하나의 브랜드만 있을 수 있습니다.

    gcloud iap oauth-brands list

    다음은 브랜드가 있는 경우 gcloud 응답의 예시입니다.

    name: projects/[PROJECT_NUMBER]/brands/[BRAND_ID]
applicationTitle: [APPLICATION_TITLE]
supportEmail: [SUPPORT_EMAIL]
orgInternalOnly: true

  2. 브랜드가 없으면 create 명령어를 사용합니다.

    gcloud iap oauth-brands create --application_title=APPLICATION_TITLE --support_email=SUPPORT_EMAIL

    이 API를 호출할 때 위의 필드가 필요합니다.

    • supportEmail: OAuth 동의 화면에 표시되는 지원 이메일. 이 이메일 주소는 사용자의 주소이거나 Google 그룹스 별칭입니다. 서비스 계정에도 이메일 주소가 있지만 실제 유효한 이메일 주소가 아니며 브랜드를 만들 때 사용할 수 없습니다. 그러나 서비스 계정은 Google 그룹의 소유자일 수 있습니다. 새 Google 그룹을 만들거나 기존 그룹을 구성하고 원하는 서비스 계정을 그룹의 소유자로 설정합니다.

    • applicationTitle: OAuth 동의 화면에 표시되는 애플리케이션 이름.

    응답에는 다음 필드가 포함됩니다.

    name: projects/[PROJECT_NUMBER]/brands/[BRAND_ID]
applicationTitle: [APPLICATION_TITLE]
supportEmail: [SUPPORT_EMAIL]
orgInternalOnly: true

IAP OAuth 클라이언트 만들기

  1. create 명령어를 사용하여 클라이언트를 만듭니다. 이전 단계의 name 브랜드를 사용합니다.

    gcloud iap oauth-clients create projects/PROJECT_NUMBER/brands/BRAND-ID --display_name=NAME

    응답에는 다음 필드가 포함됩니다.

    name: projects/[PROJECT_NUMBER]/brands/[BRAND_NAME]/identityAwareProxyClients/[CLIENT_ID]
secret: [CLIENT_SECRET]
displayName: [NAME]

서비스에 IAP 사용 설정

다음 명령어를 사용하여 서비스에 IAP를 사용 설정합니다. CLIENT_ID 및 CLIENT_SECRET를 이전에 만든 클라이언트의 OAuth 클라이언트 ID 및 클라이언트 보안 비밀번호로 바꿉니다.

gcloud beta iap web enable \
    --oauth2-client-id=CLIENT_ID \
    --oauth2-client-secret=CLIENT_SECRET \
    --resource-type=backend-services \
    --service=${BACKEND_SERVICE}

IAP 액세스 목록 구성

IAP의 액세스 정책에 사용자를 추가합니다.

gcloud beta iap web add-iam-policy-binding \
    --member=user:EMAIL_ADDRESS \
    --role=roles/iap.httpsResourceAccessor \
    --resource-type=backend-services \
    --service=$BACKEND_SERVICE

여기서 EMAIL_ADDRESS는 alice@example.com과 같이 사용자의 전체 이메일 주소입니다.

서비스 메시에서 RCToken 지원 사용 설정

기본적으로 IAP는 OAuth 클라이언트로 범위가 지정된 JSON 웹 토큰(JWT)을 생성합니다. Anthos Service Mesh의 경우, JWT이지만 구성 가능한 대상이 포함된 RequestContextToken(RCToken)을 생성하도록 IAP를 구성할 수 있습니다. RCToken을 사용하면 JWT의 대상을 임의 문자열로 구성할 수 있습니다. 이 문자열은 Anthos Service Mesh 정책에서 세밀한 승인을 위해 사용할 수 있습니다.

RCToken을 구성하려면 다음 안내를 따르세요.

  1. 프로젝트 번호의 환경 변수를 만듭니다. 프로젝트를 만들 때 자동으로 생성되고 프로젝트에 할당된 번호입니다. 프로젝트 ID와는 다릅니다.

    export PROJECT_NUMBER=YOUR_PROJECT_NUMBER

  2. RCToken 대상의 환경 변수를 만듭니다. 원하는 어떤 문자열이라도 가능합니다.

    export RCTOKEN_AUD="your-rctoken-aud"

  3. 기존 IAP 설정을 가져옵니다.

    gcloud beta iap settings get --format json \
--project=${PROJECT_NUMBER} --resource-type=compute \
--service=${BACKEND_SERVICE} > iapSettings.json

  4. IapSettings를 RCToken 대상으로 업데이트합니다.

    cat iapSettings.json | jq --arg RCTOKEN_AUD_STR $RCTOKEN_AUD \
'. + {applicationSettings: {csmSettings: {rctokenAud: $RCTOKEN_AUD_STR}}}' \
> updatedIapSettings.json

    gcloud beta iap settings set updatedIapSettings.json --format json \
--project=${PROJECT_NUMBER} --resource-type=compute --service=${BACKEND_SERVICE}

  5. Istio 인그레스 게이트웨이에서 RCToken 인증을 사용 설정합니다.

    cat <<EOF | kubectl apply -f -
apiVersion: "authentication.istio.io/v1alpha1"
kind: "Policy"
metadata:
  name: "ingressgateway"
  namespace: istio-system
spec:
  targets:
  - name: "istio-ingressgateway"
  origins:
  - jwt:
      issuer: "https://cloud.google.com/iap"
      jwksUri: "https://www.gstatic.com/iap/verify/public_key-jwk"
      audiences:
      - "$RCTOKEN_AUD"
      jwt_headers:
      - "ingress-authorization"
      trigger_rules:
      - excluded_paths:
        - exact: /healthz/ready
  principalBinding: USE_ORIGIN
EOF

  6. Bookinfo productpage에 대한 요청이 여전히 성공적인지 확인합니다.

    http://DOMAIN_NAME/productpage

정책을 테스트하려면 다음을 수행하세요.

  1. IapSettings 요청 객체를 만들되 rctokenAud를 다른 문자열로 설정합니다.

    echo $(cat <<EOF
{
   "name": "projects/${PROJECT_NUMBER}/iap_web/compute/services/${BACKEND_SERVICE}",
   "applicationSettings": {
     "csmSettings": {
       "rctokenAud": "some-other-arbitrary-string"
     }
   }
 }
EOF
) > request.txt

  2. IapSettings API를 호출하여 RCtoken 대상을 설정합니다.

    curl --request PATCH --header "Authorization: Bearer $(gcloud beta auth application-default print-access-token)" ${IAP_SETTINGS_API}

  3. Bookinfo productpage에 요청하고 요청이 실패합니다.

    http://DOMAIN_NAME/productpage

삭제

이 튜토리얼을 완료한 후에는 계정에 원치 않는 요금이 청구되지 않도록 다음 리소스를 삭제하세요.

  1. 관리형 인증서를 삭제합니다.

    kubectl delete managedcertificates example-certificate

  2. 인그레스를 삭제하면 부하 분산 리소스 할당이 해제됩니다.

    kubectl -n istio-system delete ingress example-ingress

  3. 고정 IP 주소를 삭제합니다.

    gcloud compute addresses delete example-static-ip --global

    이렇게 하려면 도메인 등록기관에서 IP 주소를 삭제해야 합니다.

  4. 클러스터를 삭제합니다. 그러면 컴퓨팅 인스턴스, 디스크, 네트워크 리소스와 같이 클러스터를 구성하는 리소스가 삭제됩니다.

    gcloud container clusters delete ${CLUSTER_NAME}