연결 소개
BigQuery를 사용하면 Cloud Storage 또는 Spanner와 같은 Google Cloud 서비스 또는 AWS나 Azure와 같은 타사 소스의 BigQuery 외부에 저장된 데이터를 쿼리할 수 있습니다. 이러한 외부 연결에는 BigQuery Connection API가 사용됩니다.
예를 들어 고객 주문에 대한 세부정보를 Cloud SQL에 저장하고 매출 데이터를 BigQuery에 저장하고 두 테이블을 단일 쿼리로 조인한다고 가정해보세요. BigQuery Connection API를 사용하여 외부 데이터베이스에 대해 Cloud SQL 연결을 만들 수 있습니다. 연결을 사용하면 데이터베이스 사용자 인증 정보가 일반 텍스트로 전송되지 않습니다.
연결은 암호화되어 BigQuery 연결 서비스에 안전하게 저장됩니다. BigQuery 연결 Identity and Access Management(IAM) 역할을 부여하여 사용자에게 연결 액세스 권한을 제공할 수 있습니다.
연결 유형
BigQuery는 다음 외부 데이터 소스에 대해 서로 다른 연결 유형을 제공합니다.
- Amazon Simple Storage Service(Amazon S3)
- Apache Spark
- Azure Blob Storage
- Vertex AI 원격 모델, 원격 함수, BigLake와 같은 Google Cloud 리소스
- Spanner
- Cloud SQL
- PostgreSQL용 AlloyDB(미리보기)
Amazon S3 연결
BigQuery Omni로 Amazon S3 연결을 만들려면 Amazon S3에 연결을 참조하세요.
기존 Amazon S3 연결이 있으면 다음을 수행할 수 있습니다.
Spark 연결
Spark용 저장 프러시저를 사용하면 BigQuery를 사용하여 Python으로 작성된 저장 프러시저를 실행할 수 있습니다. Spark 연결을 사용하면 Dataproc Serverless에 연결하고 Spark용 저장 프러시저를 실행할 수 있습니다.
이 연결을 만들려면 연결 만들기를 참조하세요.
Blob Storage 연결
BigQuery Omni를 사용하여 Blob Storage 연결을 만들려면 Blob Storage에 연결을 참조하세요.
기존 Blob Storage 연결이 있으면 다음을 수행할 수 있습니다.
Google Cloud 리소스 연결
Google Cloud 리소스 연결은 Vertex AI 원격 모델, 원격 함수, BigLake와 같은 다른 Google Cloud 리소스에 대한 액세스를 승인하기 위한 연결입니다. Google Cloud 리소스 연결을 설정하는 방법에 대한 자세한 내용은 Cloud 리소스 연결 만들기 및 설정을 참조하세요.
기존 Google Cloud 리소스 연결이 있으면 이를 사용해서 다음 BigQuery 객체를 만들 수 있습니다.
- 원격 모델. 자세한 내용은 LLM을 통한 원격 모델의 CREATE MODEL 문, Cloud AI 서비스를 통한 원격 모델의 CREATE MODEL 문, Vertex AI 호스팅 모델을 통한 원격 모델의 CREATE MODEL 문을 참조하세요.
- 원격 함수. BigQuery 원격 함수를 사용하면 Cloud Functions 또는 Cloud Run에서 지원되는 언어로 함수를 구현할 수 있습니다. 원격 함수 연결을 사용하면 Cloud Functions 또는 Cloud Run에 연결하고 이러한 함수를 실행할 수 있습니다. BigQuery 원격 함수 연결을 만들려면 연결 만들기를 참조하세요.
- BigLake 테이블. BigLake 연결은 BigLake 테이블을 외부 데이터 소스에 연결하고 Cloud Storage의 구조화된 데이터와 구조화되지 않은 데이터 모두에 대해 세분화된 BigQuery 액세스 제어 및 보안을 유지합니다.
- 객체 테이블. 자세한 내용은 객체 테이블 소개를 참조하세요.
Spanner 연결
Spanner 연결을 만들려면 Spanner에 연결을 참조하세요.
기존 Spanner 연결이 있으면 통합 쿼리를 만들 수 있습니다. 이러한 쿼리는 쿼리를 전송하기 전 Spanner에 대한 연결을 설정할 수 있습니다.
Cloud SQL 연결
Cloud SQL 연결을 만들려면 Cloud SQL에 연결을 참조하세요.
기존 Cloud SQL 연결이 있으면 통합 쿼리를 만들 수 있습니다. 이러한 쿼리는 쿼리를 전송하기 전 Cloud SQL에 대한 연결을 설정할 수 있습니다.
AlloyDB 연결
AlloyDB 연결을 만들려면 PostgreSQL용 AlloyDB에 연결을 참조하세요.
기존 AlloyDB 연결이 있으면 통합 쿼리를 만들 수 있습니다. 이러한 쿼리는 쿼리를 전송하기 전 AlloyDB에 대한 연결을 설정할 수 있습니다.
감사 로그
BigQuery는 연결에 대한 사용량과 관리 요청을 로깅합니다. 자세한 내용은 BigQuery 감사 로그 개요를 참조하세요.
다음 단계
- 연결 관리 방법 알아보기
- 원격 함수를 사용하여 객체 테이블 분석 방법 알아보기
- 저장 데이터 쿼리 방법 알아보기:
- 외부 테이블 알아보기