GKE에서 Anthos Service Mesh 업그레이드

이 가이드에서는 Google Kubernetes Engine에서 Anthos Service Mesh를 버전 1.4.5+ or 1.5.4+에서 버전 1.5.10으로 업그레이드하는 방법을 설명합니다.

Anthos Service Mesh 제어 영역 구성요소를 다시 배포하려면 5~10분 정도 걸립니다. 또한 현재 Anthos Service Mesh 버전으로 업데이트되도록 모든 워크로드에 새로운 사이드카 프록시를 삽입해야 합니다. 사이드카 프록시를 업데이트하는 데 걸리는 시간은 포드 수, 노드 수, 배포 확장 설정, 포드 중단 예산, 기타 구성 설정과 같은 다양한 요소에 따라 달라집니다. 사이드카 프록시를 업데이트하는 데 걸리는 대략적인 시간은 분당 포드 100개입니다.

업그레이드 준비

이 섹션에서는 Anthos Service Mesh를 업그레이드하기 위해 실행하는 단계를 설명합니다.

  1. 지원되는 기능과 이 가이드를 검토하여 기능과 업그레이드 프로세스를 익히세요.

  2. 이전 버전의 Anthos Service Mesh를 설치할 때 선택적 기능을 사용 설정한 경우 업그레이드 시 동일한 기능을 사용 설정해야 합니다. --set values 플래그를 추가하거나 istioctl apply 명령어를 실행할 때 YAML 파일로 -f 플래그를 지정하여 선택적 기능을 사용 설정할 수 있습니다.

    Anthos Service Mesh 1.4.5 이상에서 업그레이드하고 YAML 파일에서 선택적 기능을 사용 설정한 경우 YAML을 IstioControlPlane API에서 IstioOperator API로 변환해야 합니다.

  3. 비공개 클러스터에서 Anthos Service Mesh를 업그레이드하는 경우 자동 사이드카 삽입을 사용하려면 포트 15017을 여는 방화벽 규칙을 추가해야 합니다. 방화벽 규칙을 추가하지 않고 자동 사이드카 삽입이 사용 설정되어 있으면 워크로드를 배포할 때 오류가 발생합니다. 방화벽 규칙 추가에 대한 세부정보는 특정 사용 사례에 대한 방화벽 규칙 추가를 참조하세요.

  4. 다운타임을 예약합니다. 업그레이드는 클러스터의 크기에 따라 최대 1시간까지 걸릴 수 있습니다. 여기에는 사이드카 프록시를 업데이트하기 위해 워크로드를 다시 배포해야 하는 시간이 포함되지 않습니다.

1.4 리소스 프루닝

GKE Enterprise CLI의 알파 버전을 사용하여 Anthos Service Mesh 1.4를 설치한 경우 1.5.10 버전을 업그레이드하기 전에 1.4 리소스를 프루닝해야 할 수 있습니다.

Anthos Service Mesh 리소스에 operator.istio.io/component 라벨이 있는지 확인합니다.

kubectl get all -n istio-system --selector operator.istio.io/component

이 명령어가 No resources found in istio-system namespace를 반환하면 다음 명령어를 사용하여 Anthos Service Mesh 1.4 리소스를 프루닝합니다.

kubectl delete deploy -n istio-system promsd
kubectl delete all -n istio-system --selector 'app in (galley, istio-ingressgateway, istio-nodeagent, sidecarInjectorWebhook, promsd, pilot)'

프로젝트 및 클러스터 기본값 설정

  1. 클러스터가 생성된 프로젝트의 프로젝트 ID를 가져옵니다.

    gcloud

    gcloud projects list

    콘솔

    1. Google Cloud Console에서 대시보드 페이지로 이동합니다.

      대시보드 페이지로 이동

    2. 페이지 상단에서 선택 드롭다운 목록을 클릭합니다. 선택 창이 나타나면 프로젝트를 선택합니다. 프로젝트 ID가 프로젝트 대시보드 프로젝트 정보 카드에 표시됩니다.

  2. 프로젝트 ID의 환경 변수를 만듭니다.

    export PROJECT_ID=YOUR_PROJECT_ID
  3. Google Cloud CLI의 기본 프로젝트 ID를 설정합니다.

    gcloud config set project ${PROJECT_ID}
    
  4. 다음의 환경 변수를 만듭니다.

    • 클러스터 이름을 설정합니다.

      export CLUSTER_NAME=YOUR_CLUSTER_NAME
    • CLUSTER_LOCATION을 클러스터 영역 또는 클러스터 리전으로 설정합니다.

      export CLUSTER_LOCATION=YOUR_ZONE_OR_REGION
  5. Google Cloud CLI의 기본 영역 또는 리전을 설정합니다.

    • 단일 영역 클러스터가 있는 경우 기본 영역을 설정합니다.

      gcloud config set compute/zone ${CLUSTER_LOCATION}
    • 리전 클러스터가 있는 경우 기본 리전을 설정합니다.

      gcloud config set compute/region ${CLUSTER_LOCATION}

사용자 인증 정보 및 권한 설정

  1. 클러스터와 상호작용하기 위해 사용자 인증 정보를 가져옵니다.
    gcloud container clusters get-credentials ${CLUSTER_NAME}
  2. 클러스터 관리자 권한을 현재 사용자에게 부여합니다. Anthos Service Mesh에 필요한 역할 기반 액세스 제어(RBAC) 규칙을 만들려면 이러한 권한이 필요합니다.
    kubectl create clusterrolebinding cluster-admin-binding \
      --clusterrole=cluster-admin \
      --user="$(gcloud config get-value core/account)"

    "cluster-admin-binding" already exists 오류가 표시되면 안전하게 무시하고 기존 cluster-admin-binding을 계속 진행할 수 있습니다.

설치 파일 다운로드

    Linux

  1. Anthos Service Mesh 설치 파일을 현재 작업 디렉터리에 다운로드합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-linux.tar.gz
  2. 서명 파일을 다운로드하고 openssl을 사용하여 서명을 확인합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-linux.tar.gz.1.sig
    openssl dgst -verify - -signature istio-1.5.10-asm.2-linux.tar.gz.1.sig istio-1.5.10-asm.2-linux.tar.gz <<'EOF'
    -----BEGIN PUBLIC KEY-----
    MFkwEwYHKoZIzj0CAQYIKoZIzj0DAQcDQgAEWZrGCUaJJr1H8a36sG4UUoXvlXvZ
    wQfk16sxprI2gOJ2vFFggdq3ixF2h4qNBt0kI7ciDhgpwS8t+/960IsIgw==
    -----END PUBLIC KEY-----
    EOF

    예상되는 출력은 Verified OK입니다.

  3. 원하는 파일 시스템 위치에 파일 콘텐츠 압축을 풉니다. 예를 들어 콘텐츠를 현재 작업 디렉터리에 추출하려면 다음을 사용하세요.
    tar xzf istio-1.5.10-asm.2-linux.tar.gz

    이 명령어는 다음을 포함하는 현재 작업 디렉터리에 istio-1.5.10-asm.2이라는 설치 디렉터리를 만듭니다.

    • samples의 샘플 애플리케이션
    • bin 디렉터리에 있는 다음 도구:
      • istioctl: istioctl을 사용하여 Anthos Service Mesh를 설치합니다.
      • asmctl: Anthos Service Mesh를 설치한 후 보안 구성을 검증하기 위해 asmctl을 사용합니다. 현재 VMware용 GKE에서는 asmctl이 지원되지 않습니다.

  4. MacOS

  5. Anthos Service Mesh 설치 파일을 현재 작업 디렉터리에 다운로드합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-osx.tar.gz
  6. 서명 파일을 다운로드하고 openssl을 사용하여 서명을 확인합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-osx.tar.gz.1.sig
    openssl dgst -sha256 -verify /dev/stdin -signature istio-1.5.10-asm.2-osx.tar.gz.1.sig istio-1.5.10-asm.2-osx.tar.gz <<'EOF'
    -----BEGIN PUBLIC KEY-----
    MFkwEwYHKoZIzj0CAQYIKoZIzj0DAQcDQgAEWZrGCUaJJr1H8a36sG4UUoXvlXvZ
    wQfk16sxprI2gOJ2vFFggdq3ixF2h4qNBt0kI7ciDhgpwS8t+/960IsIgw==
    -----END PUBLIC KEY-----
    EOF

    예상되는 출력은 Verified OK입니다.

  7. 원하는 파일 시스템 위치에 파일 콘텐츠 압축을 풉니다. 예를 들어 콘텐츠를 현재 작업 디렉터리에 추출하려면 다음을 사용하세요.
    tar xzf istio-1.5.10-asm.2-osx.tar.gz

    이 명령어는 다음을 포함하는 현재 작업 디렉터리에 istio-1.5.10-asm.2이라는 설치 디렉터리를 만듭니다.

    • samples의 샘플 애플리케이션
    • bin 디렉터리에 있는 다음 도구:
      • istioctl: istioctl을 사용하여 Anthos Service Mesh를 설치합니다.
      • asmctl: Anthos Service Mesh를 설치한 후 보안 구성을 검증하기 위해 asmctl을 사용합니다. 현재 VMware용 GKE에서는 asmctl이 지원되지 않습니다.

  8. Windows

  9. Anthos Service Mesh 설치 파일을 현재 작업 디렉터리에 다운로드합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-win.zip
  10. 서명 파일을 다운로드하고 openssl을 사용하여 서명을 확인합니다.
    curl -LO https://storage.googleapis.com/gke-release/asm/istio-1.5.10-asm.2-win.zip.1.sig
    openssl dgst -verify - -signature istio-1.5.10-asm.2-win.zip.1.sig istio-1.5.10-asm.2-win.zip <<'EOF'
    -----BEGIN PUBLIC KEY-----
    MFkwEwYHKoZIzj0CAQYIKoZIzj0DAQcDQgAEWZrGCUaJJr1H8a36sG4UUoXvlXvZ
    wQfk16sxprI2gOJ2vFFggdq3ixF2h4qNBt0kI7ciDhgpwS8t+/960IsIgw==
    -----END PUBLIC KEY-----
    EOF

    예상되는 출력은 Verified OK입니다.

  11. 원하는 파일 시스템 위치에 파일 콘텐츠 압축을 풉니다. 예를 들어 콘텐츠를 현재 작업 디렉터리에 추출하려면 다음을 사용하세요.
    tar xzf istio-1.5.10-asm.2-win.zip

    이 명령어는 다음을 포함하는 현재 작업 디렉터리에 istio-1.5.10-asm.2이라는 설치 디렉터리를 만듭니다.

    • samples의 샘플 애플리케이션
    • bin 디렉터리에 있는 다음 도구:
      • istioctl: istioctl을 사용하여 Anthos Service Mesh를 설치합니다.
      • asmctl: Anthos Service Mesh를 설치한 후 보안 구성을 검증하기 위해 asmctl을 사용합니다. 현재 VMware용 GKE에서는 asmctl이 지원되지 않습니다.

  12. Anthos Service Mesh 설치 루트 디렉터리에 있는지 확인합니다.
    cd istio-1.5.10-asm.2
  13. 편의를 위해 /bin 디렉터리의 도구를 PATH에 추가합니다.
    export PATH=$PWD/bin:$PATH

리소스 구성 파일 준비

istioctl apply command를 실행하여 Anthos Service Mesh를 업그레이드하려면 명령줄에서 -f istio-operator.yaml을 지정합니다. 이 파일에는 메시 원격 분석 및 메시 보안 기능을 사용 설정하는 데 필요한 프로젝트 및 클러스터에 대한 정보가 포함되어 있습니다. istio-operator.yaml 및 기타 리소스 구성 파일을 다운로드하고 프로젝트 및 클러스터 정보를 설정해야 합니다.

리소스 구성 파일을 준비하려면 다음 안내를 따르세요.

  1. 아직 설치하지 않았다면 kpt를 설치합니다.

    gcloud components install kpt
    
  2. 선택적으로 Anthos Service Mesh 패키지 리소스 구성 파일을 위한 새 디렉터리를 만듭니다. 2개 이상의 클러스터를 설정하려는 경우 클러스터 이름을 디렉터리 이름으로 사용하는 것이 좋습니다.

  3. Anthos Service Mesh 패키지를 다운로드할 디렉터리로 변경합니다.

  4. Anthos Service Mesh 패키지를 현재 작업 디렉터리에 다운로드합니다.

    kpt pkg get \
    https://github.com/GoogleCloudPlatform/anthos-service-mesh-packages.git/asm@release-1.5-asm .
    

  5. 클러스터 이름을 설정합니다.

      kpt cfg set asm gcloud.container.cluster ${CLUSTER_NAME}

  6. 필요한 경우 kpt setter를 사용하여 리소스 구성 파일을 맞춤설정합니다. 기본적으로 이러한 setter는 gcloud config의 기본값을 사용합니다. gcloud config 기본값을 설정하거나 값을 변경하려면 다음 setter를 실행합니다.

    • 프로젝트 ID를 설정합니다.

      kpt cfg set asm gcloud.core.project ${PROJECT_ID}
    • 기본 영역 또는 리전을 설정합니다.

      kpt cfg set asm gcloud.compute.location ${CLUSTER_LOCATION}
  7. 원하는 경우 Cloud Source Repositories와 같은 자체 소스 제어 시스템에 리소스 구성 파일을 대조하여 파일의 변경사항을 추적할 수 있습니다.

Anthos Service Mesh 업그레이드

이 섹션에서는 Anthos Service Mesh를 설치하고 사용 설정하는 방법을 설명합니다.

  • 지원되는 기능 페이지에 나열된 지원되는 기본 기능
  • Anthos Service Mesh 인증 기관(Mesh CA)
  • Google Cloud 콘솔에서 Anthos Service Mesh 대시보드를 구동하는 원격 분석 데이터 파이프라인

지원되는 선택 기능 사용에 대한 자세한 내용은 선택 기능 사용 설정을 참조하세요.

Anthos Service Mesh를 설치하려면 다음을 사용하세요.

다음 명령어 중 하나를 선택하여 PERMISSIVE 상호 TLS(mTLS) 인증 모드 또는 STRICT mTLS 모드에서 Anthos Service Mesh를 구성합니다.

PERMISSIVE mTLS

istioctl manifest apply --set profile=asm \
  -f asm/cluster/istio-operator.yaml

STRICT mTLS

istioctl manifest apply --set profile=asm \
  -f asm/cluster/istio-operator.yaml \
  --set values.global.mtls.enabled=true

제어 영역 구성요소 확인

업그레이드하려면 제어 영역 구성요소를 재설치해야 하며 재설치에는 약 5~10분이 걸립니다. 새 구성요소가 설치되면 이전 제어 영역 구성요소가 종료된 후 삭제됩니다. 워크로드의 AGE 열에 있는 값을 보면 진행 상황을 확인할 수 있습니다.

kubectl get pod -n istio-system

출력 예시:

NAME                                     READY   STATUS        RESTARTS   AGE
istio-ingressgateway-5bfdf7c586-v6wxx    2/2     Terminating   0          25m
istio-ingressgateway-7b598c5557-b88md    2/2     Running       0          5m44s
istiod-78cdbbbdb-d7tps                   1/1     Running       0          5m16s
promsd-576b8db4d6-lqf64                  2/2     Running       1          5m26s

이 예시에는 istio-ingressgateway의 두 인스턴스가 있습니다. AGE 열에 25m가 있는 인스턴스가 종료됩니다. 다른 모든 구성요소는 새로 설치됩니다.

설치 검증

asmctl 분석 도구를 사용하여 프로젝트, 클러스터, 워크로드의 기본 구성을 검증하는 것이 좋습니다. asmctl 테스트가 실패하면 asmctl에서 가능한 경우 해결책을 권장합니다. asmctl validate 명령어는 다음을 확인하는 기본 테스트를 실행합니다.

  1. Anthos Service Mesh에 필요한 API가 프로젝트에 사용 설정되어 있는지 여부
  2. Istio-Ingressgateway가 Mesh CA를 호출하도록 올바르게 구성되어 있는지 여부
  3. Istiod 및 Istio-Ingressgateway의 전반적인 상태

선택사항인 --with-testing-workloads 플래그를 사용하여 asmctl validate 명령어를 실행하면 기본 테스트 외에도 asmctl이 다음을 확인하는 보안 테스트를 실행합니다.

  1. 상호 TLS(mTLS) 통신이 올바르게 구성되었습니다.
  2. Mesh CA는 인증서를 발급할 수 있습니다.

보안 테스트를 실행하기 위해 asmctl은 클러스터의 워크로드를 테스트 네임스페이스에 배포하고 mTLS 통신 테스트를 실행하며 결과를 출력하고 테스트 네임스페이스를 삭제합니다.

asmctl을 실행하려면 다음 안내를 따르세요.

  1. gcloud 애플리케이션 기본 사용자 인증 정보가 설정되어 있는지 확인합니다.

     gcloud auth application-default login
    
  2. 아직 하지 않은 경우 사용자 인증 정보를 가져와 클러스터와 상호작용합니다.

     gcloud container clusters get-credentials ${CLUSTER_NAME}
    
  3. PATHistio-1.5.10-asm.2/bin이 있는 경우 기본 및 보안 테스트를 모두 실행하려면 다음을 입력하세요.

    asmctl validate --with-testing-workloads
    

    성공하면 다음과 비슷한 출력이 표시됩니다.

    [asmctl version 0.3.0]
    Using Kubernetes context: example-project_us-central1-example-cluster
    To change the context, use the --context flag
    Validating enabled APIs
    OK
    Validating ingressgateway configuration
    OK
    Validating istio system
    OK
    Validating sample traffic
    Launching example services...
    Sent traffic to example service http code: 200
    verified mTLS configuration
    OK
    Validating issued certs
    OK
    

사이드카 프록시 업데이트

Anthos Service Mesh를 업그레이드하기 전에 클러스터에서 실행 중이었던 모든 워크로드는 현재 Anthos Service Mesh 버전을 포함하도록 사이드카 프록시를 삽입하거나 업데이트해야 합니다.

자동 사이드카 삽입을 사용하면 pod를 다시 시작하여 기존 pod의 사이드카를 업데이트할 수 있습니다. pod를 다시 시작하는 방법은 배포의 일부로 생성되었는지 여부에 따라 다릅니다.

  1. 배포를 사용한 경우 사이드카가 있는 모든 pod가 다시 시작되도록 배포를 다시 시작합니다.

    kubectl rollout restart YOUR_DEPLOYMENT -n YOUR_NAMESPACE

    배포를 사용하지 않은 경우, pod를 삭제하면 사이드카로 자동으로 재생성됩니다.

    kubectl delete pod -n YOUR_NAMESPACE --all
  2. 네임스페이스의 모든 pod에 사이드카가 삽입되어 있는지 확인합니다.

    kubectl get pod -n YOUR_NAMESPACE --all

    위 명령어의 결과로 반환된 다음 출력 예시의 경우 READY 열에서 각 워크로드마다 컨테이너가 2개(기본 컨테이너와 사이드카 프록시 컨테이너)가 있다는 것을 확인할 수 있습니다.

    NAME                    READY   STATUS    RESTARTS   AGE
    YOUR_WORKLOAD           2/2     Running   0          20s
    ...