创建集成的 DBT 和 Cloud Composer 操作环境

Cloud Composer 3 | Cloud Composer 2 | Cloud Composer 1

本页介绍了如何使用 Terraform 创建集成的 DBT 和 Cloud Composer 运维环境。

terraform-google-dbt-composer-blueprint` 模块简介

terraform-google-dbt-composer-blueprint 模块使用 Terraform 执行以下操作：

  • 在项目中应用所需的 API 和权限。
  • 创建文档（适用于 DBT）存储分区。
  • 创建 Cloud Composer 环境，包括网络配置和服务账号。
  • 针对 Cloud Composer 的 DAG 实用程序中的复制
  • 将项目的审核日志导出到 BigQuery 项目，包括两个具体化视图和一个用于支持信息中心的视图。

此外，该模块还提供了一个端到端示例，展示了如何使用 DAG 实用程序并在 Cloud Composer 中创建示例 DBT 作业。

GitHub 上的模块代码

如需了解详情和代码示例，请参阅 GitHub 上的 terraform-google-dbt-composer-blueprint 模块页面。

后续步骤