创建集成的 DBT 和 Cloud Composer 操作环境

Cloud Composer 1 | Cloud Composer 2 | Cloud Composer 3

本页介绍了如何使用 Terraform 创建集成的 DBT 和 Cloud Composer 运维环境。

terraform-google-dbt-composer-blueprint` 模块简介

terraform-google-dbt-composer-blueprint 模块使用 Terraform 执行以下操作:

  • 在项目中应用所需的 API 和权限。
  • 创建文档(适用于 DBT)存储桶。
  • 创建 Cloud Composer 环境,包括网络 配置和服务账号。
  • 跨 Cloud Composer 的 DAG 实用程序复制
  • 将项目的审核日志导出到 BigQuery 项目。 包括两个具体化视图和一个支持信息中心的视图。

此外,该模块还提供了一个端到端示例,展示了如何使用 DAG 实用程序并在 Cloud Composer 中创建示例 DBT 作业。

GitHub 上的模块代码

如需了解详情和代码示例,请参阅 terraform-google-dbt-composer-blueprint 模块 页面。

后续步骤