Bigtable에서 카운터 만들기 및 업데이트

쓰기 시간에 값을 집계하는 테이블 셀인 집계를 사용하여 Bigtable에서 카운터를 만들고 업데이트하는 방법을 알아봅니다. 이 빠른 시작에서는 Google Cloud CLI와 cbt CLI를 사용하여 다음 세 가지 카운터를 만듭니다.

  • 누적 합계를 유지하는 카운터
  • 추가된 모든 값의 최솟값을 추적하는 카운터
  • 추가된 모든 값의 최댓값을 추적하는 카운터

시작하기 전에

  1. Sign in to your Google Account.

    If you don't already have one, sign up for a new account.

  2. Install the Google Cloud CLI.

  3. 외부 ID 공급업체 (IdP)를 사용하는 경우 먼저 제휴 ID로 gcloud CLI에 로그인해야 합니다.

  4. gcloud CLI를 초기화하려면, 다음 명령어를 실행합니다. 

    gcloud init

  5. gcloud CLI를 초기화한 후 업데이트하고 필요한 구성요소를 설치합니다. 

    gcloud components update
gcloud components install cbt

  6. Create or select a Google Cloud project.

    • Create a Google Cloud project:

      gcloud projects create PROJECT_ID

      Replace PROJECT_ID with a name for the Google Cloud project you are creating.

    • Select the Google Cloud project that you created:

      gcloud config set project PROJECT_ID

      Replace PROJECT_ID with your Google Cloud project name.

  7. Verify that billing is enabled for your Google Cloud project.

  8. Enable the Cloud Bigtable API and Cloud Bigtable Admin API APIs: 

    gcloud services enable bigtable.googleapis.com bigtableadmin.googleapis.com

  9. Install the Google Cloud CLI.

  10. 외부 ID 공급업체 (IdP)를 사용하는 경우 먼저 제휴 ID로 gcloud CLI에 로그인해야 합니다.

  11. gcloud CLI를 초기화하려면, 다음 명령어를 실행합니다. 

    gcloud init

  12. gcloud CLI를 초기화한 후 업데이트하고 필요한 구성요소를 설치합니다. 

    gcloud components update
gcloud components install cbt

  13. Create or select a Google Cloud project.

    • Create a Google Cloud project:

      gcloud projects create PROJECT_ID

      Replace PROJECT_ID with a name for the Google Cloud project you are creating.

    • Select the Google Cloud project that you created:

      gcloud config set project PROJECT_ID

      Replace PROJECT_ID with your Google Cloud project name.

  14. Verify that billing is enabled for your Google Cloud project.

  15. Enable the Cloud Bigtable API and Cloud Bigtable Admin API APIs: 

    gcloud services enable bigtable.googleapis.com bigtableadmin.googleapis.com
  16. 다음 명령어를 실행하여 gcloud CLI가 최신 상태이고 cbt CLI가 포함되어 있는지 확인합니다. 
    gcloud components update
     
    gcloud components install cbt

    17. Bigtable 인스턴스를 만듭니다.

    1. bigtable instances create 명령어를 사용하여 인스턴스를 만듭니다.

      gcloud bigtable instances create counters-quickstart-instance \
    --display-name="Counters quickstart instance" \
    --cluster-config=id="counters-quickstart-cluster",zone="us-east1-c"

    내 인스턴스에 연결

    1. .cbtrc 파일을 만들어 프로젝트와 인스턴스를 사용하도록 cbt CLI를 구성합니다.

      echo project = PROJECT_ID >> ~/.cbtrc && echo instance = counters-quickstart-instance >> ~/.cbtrc

      PROJECT_ID를 사용 중인 프로젝트의 ID로 바꿉니다.

    2. .cbtrc 파일을 올바르게 설정했는지 확인합니다.

      cat ~/.cbtrc

      터미널에는 .cbtrc 파일의 콘텐츠가 표시됩니다. 이는 다음과 유사합니다.

      project = PROJECT_ID
instance = counters-quickstart-instance

      이제 인스턴스에서 cbt CLI를 사용할 수 있습니다.

    집계 column family가 있는 테이블 만들기

    1. cbt createtable 명령어를 사용하여 집계 column family가 3개인 counters_quickstart_table이라는 테이블을 만듭니다. 각 column family를 서로 다른 집계 유형으로 구성합니다.

      • 열 패밀리 max_family은 Integer 입력 유형이 있는 Max 유형입니다.
      • 열 패밀리 min_family은 Integer 입력 유형이 있는 Min 유형입니다.
      • 열 패밀리 sum_family은 Integer 입력 유형이 있는 Sum 유형입니다.
      cbt createtable counters_quickstart_table families=sum_family:never:intsum,min_family:never:intmin,max_family:never:intmax

    2. cbt ls 명령어를 실행하여 column family를 나열합니다.

      cbt ls counters_quickstart_table

      다음과 유사한 출력이 셸에 표시됩니다.

      Family Name     GC Policy
-----------     ---------
max_family      <never>
min_family      <never>
sum_family      <never>

    표에 카운터 만들기

    1. cbt addtocell 명령어를 사용하여 행 키 row-key1와 타임스탬프 0를 사용하여 세 개의 column family 각각의 새 열에 5의 초기 값을 씁니다. 이 작업은 카운터로 사용할 집계 셀을 만듭니다.

      cbt addtocell counters_quickstart_table row-key1 sum_family:sum_column=5@0
cbt addtocell counters_quickstart_table row-key1 min_family:min_column=5@0
cbt addtocell counters_quickstart_table row-key1 max_family:max_column=5@0

    데이터 읽기

    1. 카운터 값을 바이트가 아닌 정수로 보려면 cbt CLI에서 출력을 포맷하는 데 사용할 수 있는 yaml 파일을 정의하세요. 다음을 실행합니다.

      echo "families:" > cbtformat.yaml
echo "  max_family:" >> cbtformat.yaml
echo "    default_encoding: BigEndian" >> cbtformat.yaml
echo "    default_type: INT64" >> cbtformat.yaml
echo "  min_family:" >> cbtformat.yaml
echo "    default_encoding: BigEndian" >> cbtformat.yaml
echo "    default_type: INT64" >> cbtformat.yaml
echo "  sum_family:" >> cbtformat.yaml
echo "    default_encoding: BigEndian" >> cbtformat.yaml
echo "    default_type: INT64" >> cbtformat.yaml

    2. cbtformat.yaml 파일을 올바르게 설정했는지 확인합니다.

      cat ~/cbtformat.yaml

      터미널에는 cbtformat.yaml 파일의 콘텐츠가 표시됩니다. 이는 다음과 유사합니다.

      families:
  max_family:
    default_encoding: BigEndian
    default_type: INT64
  min_family:
    default_encoding: BigEndian
    default_type: INT64
  sum_family:
    default_encoding: BigEndian
    default_type: INT64

    3. cbt read 명령어를 사용하여 yaml 파일을 전달하고 테이블에 추가한 데이터를 읽습니다. 이제 표에 세 개의 열이 있으며 각 열에는 다른 집계 유형이 있습니다.

      cbt read counters_quickstart_table format-file=$HOME/cbtformat.yaml

      다음과 유사한 출력이 셸에 표시됩니다. 값은 정수로 형식이 지정되고 타임스탬프는 UTC 형식입니다.

      row-key1
  max_family:max_column                    @ 1970/01/01-00:00:00.000000
    5
  min_family:min_column                    @ 1970/01/01-00:00:00.000000
    5
  sum_family:sum_column                    @ 1970/01/01-00:00:00.000000
    5

    카운터 업데이트

    1. 셀을 만들 때 사용한 동일한 타임스탬프를 사용하여 테이블의 각 열에 값 3을 추가합니다. 각 열에서 셀 값은 셀의 집계 유형에 따라 기존 값과 병합됩니다.

      cbt addtocell counters_quickstart_table row-key1 sum_family:sum_column=3@0
cbt addtocell counters_quickstart_table row-key1 min_family:min_column=3@0
cbt addtocell counters_quickstart_table row-key1 max_family:max_column=3@0

    2. cbt read 명령어를 다시 사용하여 테이블의 데이터를 읽습니다. 이제 각 셀에 집계된 값이 포함됩니다.

      cbt read counters_quickstart_table format-file=$HOME/cbtformat.yaml

      sum_column에는 5와 3의 합 (8)이 포함되고, min_column에는 여기에 쓰인 두 값의 최솟값 (3)이 포함되며, max_column에는 여기에 쓰인 두 값의 최댓값 (5)이 포함됩니다.

      row-key1
    max_family:max_column                    @ 1970/01/01-00:00:00.000000
        5
    min_family:min_column                    @ 1970/01/01-00:00:00.000000
        3
    sum_family:sum_column                    @ 1970/01/01-00:00:00.000000
        8

    3. 선택사항: SQL을 사용하여 Google Cloud 콘솔에서 테이블을 쿼리합니다.

      1. Google Cloud 콘솔에서 Bigtable 인스턴스 페이지를 엽니다.

        인스턴스 목록으로 이동

      2. 목록에서 counters-quickstart-instance를 선택합니다.

      3. 탐색 메뉴에서 Bigtable Studio를 클릭합니다.

      4. 편집기 탭을 클릭합니다.

      5. 다음 쿼리를 편집기에 붙여넣습니다.

        SELECT * FROM `counters_quickstart_table`

      6. 실행을 클릭합니다. 쿼리 결과는 결과 테이블에 표시되며 다음과 유사합니다.

      _key max_family min_family sum_family
      row-key1 { "max_column": 5 } { "min_column": 5 } { "sum_column": 8 }

    삭제

    이 페이지에서 사용한 리소스 비용이 Google Cloud 계정에 청구되지 않도록 하려면 리소스가 포함된 Google Cloud 프로젝트를 삭제합니다.

    1. 터미널에서 counters_quickstart_table 테이블을 삭제합니다.

      cbt deletetable counters_quickstart_table

    2. 인스턴스를 삭제합니다.

      cbt deleteinstance counters-quickstart-instance

    3. .cbtrc 파일을 삭제합니다.

      rm ~/.cbtrc

    4. 서식 파일을 삭제합니다.

      rm ~/cbtformat.yaml

    5. 선택사항: gcloud CLI에서 사용자 인증 정보를 취소합니다.

      gcloud auth revoke

    다음 단계