콘텐츠로 이동하기
데이터베이스

Cloud Spanner로 진입 비용 90% 절감, 뛰어난 관측 가능성, 간편한 쿼리 수행 달성

2021년 7월 21일
Vaibhav Govil

Group Product Manager, Google

Google Cloud 사용해 보기

$300의 무료 크레딧과 20개 이상의 항상 무료인 제품으로 Google Cloud 사용을 시작해보세요.

무료 체험

 * 본 아티클의 원문은 2021년 5월 26일 Google Cloud 블로그(영문)에 게재되었습니다. 

Cloud Spanner가 고객들에게 사랑받는 이유는 관계형 시맨틱스와 SQL의 이점과 더불어 비관계형 데이터베이스의 확장성과 가용성을 누릴 수 있기 때문입니다. 많은 고객들이 Spanner로 더 많은 작업을 이전하기를 원하며 개발, 테스트, 소규모 프로덕션 워크로드를 지원하는 소형 인스턴스 크기의 사용을 요청해 왔습니다. 이러한 요청에 부응하여 세분화된 인스턴스 크기 조정이 Spanner에 곧 도입된다는 반가운 소식을 전해드립니다.

세분화된 인스턴스 크기 조정이 조만간 퍼블릭 프리뷰 버전으로 출시됩니다. 이 기능을 사용하면 일반 인스턴스 비용의 10분의 1에 불과한 월 $65가량의 비용으로 Spanner에서 워크로드를 실행할 수 있습니다.

또한 실시간 통계를 위해 운영 사일로를 허물고 개발자에게 더 우수한 데이터베이스 관측 가능성을 제공하는 새로운 엔터프라이즈 기능도 출시합니다. 

  • Datastream(현재 퍼블릭 프리뷰 버전)의 변경 데이터 캡처(CDC) 서비스를 이용하면 기업에서 이종 데이터베이스와 애플리케이션 간에 데이터를 동기화할 수 있습니다. Datastream에서 Spanner가 지원되면 사용자가 최소한의 지연 시간으로 MySQL 또는 Oracle에서 Spanner로 데이터를 안정적으로 스트리밍할 수 있습니다. 
  • Spanner에 대한 BigQuery 페더레이션(출시 예정)으로 사용자가 데이터를 이전하거나 복사하지 않고도 BigQuery에서 Spanner에 상주하는 트랜잭션 데이터를 쿼리할 수 있습니다. 
  • Key Visualizer(현재 퍼블릭 프리뷰 버전)에서는 대화형 모니터링을 제공하여 개발자가 Spanner에서 추세와 사용 패턴을 빠르게 파악할 수 있습니다. 

세분화된 인스턴스 크기 조정을 통한 액세스 범용화 

현재 고객들은 워크로드를 실행해야 하는 노드 수를 지정하여 Spanner 인스턴스를 프로비저닝합니다. 각 노드는 최대 10,000QPS(초당 쿼리 수)의 읽기 또는 2,000QPS의 쓰기(행당 1KB 데이터로 단일 행 쓰기)와 2TB의 스토리지를 제공할 수 있습니다. Spanner 노드는 리전 인스턴스의 경우 3개 영역에 복제되고 멀티 리전 인스턴스의 경우 5개 이상 영역에 복제됩니다. 선택한 노드 수에 따라 해당 인스턴스의 데이터베이스에서 사용할 수 있는 제공 리소스 및 스토리지 리소스 양이 결정됩니다. 

지금까지 Spanner에서 리소스를 프로비저닝하는 가장 세분화된 단위는 노드 1개였습니다. 보다 세분화된 제어를 지원하기 위해 처리 단위(PU)가 도입됩니다. Spanner 노드 1개는 1,000PU에 해당합니다. 이제 고객은 100PU 배치로 프로비저닝하고 해당하는 비율의 컴퓨팅 및 스토리지 리소스를 얻을 수 있습니다. 이에 따라 팀에서는 훨씬 저렴한 비용으로 Spanner에서 소규모 워크로드를 실행할 수 있습니다. 이 기능을 사용하는 고객은 100PU로 시작한 후 필요에 따라 100PU 배치씩 늘려 최대 1,000PU(노드 1개)까지 확장할 수 있으며 그동안 다운타임이 발생하지 않습니다. 결과적으로 고객이 지금처럼 노드를 더 추가하여 계속 확장할 수 있습니다. 워크로드에서 여러 용량의 노드를 사용하는 경우 고객이 PU와 노드 중 무엇을 사용해 워크로드의 리소스를 프로비저닝할지 선택할 수 있습니다. 

예를 들어 게임 개발자가 us-central1에서 월 $65에 100PU의 컴퓨팅 용량을 사용하는 'baseball-game'이라는 이름의 Spanner 인스턴스를 만드는 경우를 가정해 보겠습니다.

https://storage.googleapis.com/gweb-cloudblog-publish/images/1_Spanner_instance.max-600x600.jpg

아래에서 보다시피 100PU 인스턴스에 해당하는 비율의 최대 스토리지인 205GB가 할당됩니다.

https://storage.googleapis.com/gweb-cloudblog-publish/images/2_proportional_maximum_storage.max-1000x1000.jpg

게임이 인기를 끌기 시작하면서 리소스 수요가 증가하자 이 사용자는 인스턴스를 수정하여 컴퓨팅 용량을 500PU로 늘리며 이때 해당하는 비율의 최대 스토리지는 1TB입니다.

https://storage.googleapis.com/gweb-cloudblog-publish/images/3_increase_compute_capacity.max-600x600.jpg

게임이 점점 더 많은 인기를 얻자 이 게임 회사에서는 고객들이 기다리던 기능을 게임에 출시할 준비를 합니다. 출시일에 사용량이 급증할 것으로 예상한 게임 개발자는 컴퓨팅 용량을 3,000PU로 늘립니다. 일정 기간 동안 인스턴스에 할당된 컴퓨팅 용량을 Cloud Monitoring 그래프에서 확인할 수 있습니다.

https://storage.googleapis.com/gweb-cloudblog-publish/images/4_Compute_capacity.max-700x700.jpg

액세스 요청 

이 양식을 작성하면 세분화된 인스턴스 크기 조정 기능의 사전 체험판을 요청할 수 있습니다.  


Datastream CDC와 BigQuery 페더레이션을 사용한 운영 사일로 해체

 

BigQuery 페더레이션. BigQuery에서는 여러 소스의 데이터를 한데 취합할 수 있어 쉽고 원활한 분석이 가능합니다. 조만간 BigQuery에서 직접 Spanner의 데이터도 분석할 수 있게 됩니다. Spanner의 BigQuery 페더레이션을 사용하면 데이터를 이전하거나 복사하지 않고도 Spanner에 상주하는 데이터를 실시간으로 즉시 쿼리할 수 있습니다. 아래와 같이 BigQuery에서 Spanner를 외부 데이터 소스로 설정하기만 하면 됩니다.


https://storage.googleapis.com/gweb-cloudblog-publish/images/5_BigQuery_Federation.max-500x500.jpg

 변경 데이터 캡처 수집. 현재 퍼블릭 프리뷰 버전인 Datastream을 사용하면 MySQL 및 Oracle 데이터베이스에서 Google Cloud로 변경 데이터를 스트리밍할 수 있습니다. 오늘 기준으로 기본 제공되는 Dataflow 템플릿을 사용해 변경 데이터를 직접 Spanner로 수집할 수 있습니다. 그러면 MySQL 및 Oracle 데이터베이스의 데이터를 거의 실시간으로 Spanner에 마이그레이션할 수 있습니다.

Key Visualizer를 사용한 성능 및 리소스 사용 이해

Key Visualizer는 개발자와 관리자가 Spanner의 사용 패턴을 분석할 수 있는 새로운 양방향 모니터링 도구입니다. 모든 크기의 데이터베이스에 대한 주요 성능 및 리소스 측정항목의 추세와 이상점을 알 수 있어 쿼리를 최적화하고 인프라 비용을 절감하는 데 도움이 됩니다. 성능 미세 조정 및 인스턴스 크기 조정을 위해 설계된 Key Visualizer를 오늘부터 추가 비용 없이 모든 Spanner 데이터베이스의 웹 기반 Cloud Console에서 퍼블릭 프리뷰 버전으로 사용할 수 있습니다. 자세한 내용은 Key Visualizer 블로그를 참조하세요. 

자세히 알아보기

게시 위치