타사 전송 사용

BigQuery Data Transfer Service에 타사 전송을 사용하면 Salesforce CRM, Adobe Analytics, Facebook Ads와 같은 외부 데이터 소스의 반복적인 로드 작업을 자동으로 예약 및 관리할 수 있습니다.

시작하기 전에

타사 데이터 전송을 만들기 전에 다음을 수행합니다.

  • BigQuery Data Transfer Service 사용 설정에 필요한 모든 작업을 완료했는지 확인합니다.
  • 데이터를 저장할 BigQuery 데이터세트를 만듭니다.
  • 전송을 만드는 사람에게 다음과 같은 BigQuery 필수 권한이 있는지 확인합니다.

    • 전송을 만들 수 있는 bigquery.transfers.update 권한
    • 대상 데이터세트의 bigquery.datasets.update 권한

    사전 정의된 프로젝트 수준 IAM 역할인 bigquery.admin에는 bigquery.transfers.updatebigquery.datasets.update 권한이 포함되어 있습니다. BigQuery의 IAM 역할에 대한 자세한 내용은 액세스 제어를 참조하세요.

  • 타사 데이터 소스의 문서를 참조하여 전송을 사용 설정하는 데 필요한 권한을 구성했는지 확인합니다.

  • 전송 실행 알림은 현재 알파 버전입니다. Cloud Pub/Sub에서 전송 실행 알림을 설정하려면 pubsub.topics.setIamPolicy 권한이 있어야 합니다. 이메일 알림만 설정한다면 Cloud Pub/Sub 권한은 필요 없습니다. 자세한 내용은 BigQuery Data Transfer Service 실행 알림을 참조하세요.

제한사항

타사 전송에는 다음과 같은 제한사항이 적용됩니다.

  • GCP Console에서 BigQuery 웹 UI를 사용해서 타사 전송을 만들거나 업데이트해야 합니다. 기본 웹 UI로는 타사 전송을 구성할 수 없습니다.
  • 현재 명령줄 도구를 사용하여 타사 전송을 구성하거나 업데이트할 수 없습니다.

타사 데이터 전송 설정

GCP Console을 사용하여 타사 데이터 전송을 만들려면 다음 단계를 따르세요.

  1. Google Cloud Platform Marketplace로 이동합니다.

    Google Cloud Platform Marketplace로 이동

  2. 적절한 타사 제공업체를 클릭합니다.

  3. 타사 제공업체의 문서 페이지에서 등록을 클릭합니다. 등록이 처리되는 데 시간이 다소 걸릴 수 있습니다.

  4. 등록이 완료되면 전송 구성을 클릭합니다.

  5. 전송 만들기 페이지에서 다음을 수행합니다.

    • 소스에서 적절한 타사 데이터 소스를 선택합니다. 데이터 소스 탐색을 클릭하면 Google Cloud Platform Marketplace에서 타사 제공업체 목록을 확인할 수 있습니다.

      전송 소스

    • 표시 이름에 전송 이름을 입력합니다(예: My Transfer). 전송 이름은 나중에 수정해야 할 경우를 대비하여 전송을 쉽게 식별할 수 있는 값이면 됩니다.

      전송 이름

    • 일정에서 기본값(지금 시작)을 유지하거나 설정 시간에 시작을 클릭합니다.

      • 반복 빈도에서 전송을 실행할 빈도 옵션을 선택합니다. 옵션은 다음과 같습니다.

        • 매일(기본값)
        • 매주
        • 매월
        • 커스텀
        • 요청 시

        매일 이외의 옵션을 선택하면 추가 옵션이 제공됩니다. 예를 들어 매주를 선택하면 요일을 선택할 수 있는 옵션이 나타납니다.

      • 시작일 및 실행 시간에 전송을 시작할 날짜와 시간을 입력합니다. 지금 시작을 선택하면 이 옵션은 사용 중지됩니다.

        전송 일정

    • 대상 데이터세트에서 데이터를 저장하기 위해 만든 데이터세트를 선택합니다.

      전송 데이터세트

    • (선택사항) 알림 옵션 섹션에서 다음을 수행합니다.

      • 전환을 클릭하여 이메일 알림을 사용 설정합니다. 이 옵션을 사용 설정한 경우, 전송 실행이 실패하면 전송 관리자에게 이메일 알림이 발송됩니다.
      • Cloud Pub/Sub 주제 선택에서 주제 이름을 선택하거나 주제 만들기를 클릭하여 주제를 만듭니다. 이 옵션은 전송의 Cloud Pub/Sub 실행 알림을 구성합니다. 전송 실행 알림은 현재 알파 버전입니다.
  6. 소스 연결을 클릭합니다.

  7. 메시지가 표시되면 수락을 클릭하여 데이터 소스에 연결하고 BigQuery의 데이터를 관리할 수 있는 BigQuery Data Transfer Service 권한을 부여합니다.

  8. 다음 페이지의 안내를 따라 외부 데이터 소스에 연결을 구성합니다.

  9. 구성 단계를 완료했으면 저장을 클릭합니다.

타사 전송 설정 문제해결

전송 설정 중에 문제가 발생하면 관련 타사 공급업체에 문의하세요. Google Cloud Platform Marketplace의 전송 문서 페이지에서 연락처 정보를 확인할 수 있습니다.

데이터 쿼리

BigQuery로 전송되는 데이터는 내부 데이터화 시간별로 파티션을 나눈 테이블에 기록됩니다. 자세한 내용은 파티션을 나눈 테이블 소개를 참조하세요.

자동 생성된 뷰를 사용하지 않고 직접 테이블을 쿼리하는 경우에는 쿼리에서 _PARTITIONTIME 유사 열을 사용해야 합니다. 자세한 내용은 파티션을 나눈 테이블 쿼리를 참조하세요.

다음 단계

  • BigQuery Data Transfer Service 개요는 BigQuery Data Transfer Service 소개를 참조하세요.
  • 전송 구성 정보 가져오기, 전송 구성 나열, 전송 실행 기록 보기 등 전송 사용에 대한 자세한 내용은 전송 작업을 참조하세요.
이 페이지가 도움이 되었나요? 평가를 부탁드립니다.

다음에 대한 의견 보내기...

도움이 필요하시나요? 지원 페이지를 방문하세요.