BigQuery Data Transfer Service란?

BigQuery Data Transfer Service는 정해진 일정에 따라 관리되는 방식으로 데이터를 BigQuery로 자동 이동합니다. 그러면 분석팀에서 코드를 단 한 줄도 작성하지 않고 BigQuery 데이터 웨어하우스의 기반을 마련할 수 있습니다.

다음을 사용하여 BigQuery Data Transfer Service에 액세스할 수 있습니다.

데이터 전송을 구성하면 BigQuery Data Transfer Service가 정기적으로 데이터를 BigQuery로 자동 로드합니다. 중단이나 불일치 문제를 해결하기 위해 데이터 백필을 시작할 수도 있습니다. BigQuery Data Transfer Service를 사용하여 BigQuery에서 다른 곳으로 데이터를 전송할 수 없습니다.

BigQuery Data Transfer Service는 BigQuery에 데이터를 로드하는 것 외에도 데이터 세트 사본과 예약된 쿼리의 두 가지 BigQuery 작업에 사용됩니다.

지원되는 데이터 소스

BigQuery Data Transfer Service는 다음 데이터 소스에서 데이터 로드를 지원합니다.

데이터 제공 SLO 고려사항

데이터 전송 SLO는 BigQuery Data Transfer Service를 사용하여 Google Cloud내 소스에서 자동으로 예약된 데이터 전송에 적용됩니다.

서드 파티 또는 비Google Cloud 소스가 포함된 데이터 전송의 경우 이러한 소스의 서비스 중단이 BigQuery Data Transfer Service의 성능에 영향을 줄 수 있습니다. 따라서 데이터 전송 SLO는Google Cloud 이외의 소스에서 BigQuery Data Transfer Service 데이터 전송에는 적용되지 않습니다.

지원되는 리전

BigQuery와 마찬가지로 BigQuery Data Transfer Service는 여러 단일 리전을 사용할 수 있는 멀티 리전 리소스입니다.

BigQuery 데이터 세트의 지역은 BigQuery Data Transfer Service로 전송되는 데이터를 저장하기 위해 대상 데이터 세트를 만들 때 지정됩니다. 전송을 설정할 때 전송 구성은 대상 데이터세트와 동일한 위치에 설정됩니다. BigQuery Data Transfer Service는 대상 데이터 세트와 동일한 위치에서 데이터를 처리하고 스테이징합니다.

BigQuery로 전송할 데이터에는 리전이 있을 수도 있습니다. 대부분의 경우 데이터가 저장되는 리전과 BigQuery에서 대상 데이터 세트의 위치는 관련성이 없습니다. 다른 유형의 전송에서는 데이터 세트와 소스 데이터가 동일한 리전 또는 호환되는 리전의 같은 위치에 배치되어야 합니다.

BigQuery Data Transfer Service의 전송 및 리전 호환성에 대한 자세한 내용은 데이터 세트 위치 및 전송을 참조하세요. BigQuery에서 지원되는 리전은 데이터 세트 위치를 참조하세요.

데이터 전송과 함께 예약 슬롯 사용

BigQuery Data Transfer Service에 의해 트리거된 작업은 프로젝트, 폴더 또는 조직이 다음 작업 유형 중 하나를 사용하여 예약에 할당된 경우에만 예약 슬롯을 사용합니다.

  • QUERY를 사용하여 작업 쿼리
  • PIPELINE를 사용하여 작업 로드

데이터 세트를 복사하는 작업은 예약 슬롯을 사용하지 않습니다.

가격 책정

BigQuery Data Transfer Service 가격에 대한 자세한 내용은 가격 책정 페이지를 참조하세요.

데이터가 BigQuery로 전송되면 표준 BigQuery 스토리지와 쿼리 가격 책정이 적용됩니다.

할당량

BigQuery Data Transfer Service 할당량에 대한 자세한 내용은 할당량 및 한도 페이지를 참조하세요.

다음 단계

해당 데이터 소스의 설명서를 참조하여 전송을 만드는 방법을 알아보세요.