Membuat lingkungan operasi DBT dan Cloud Composer terintegrasi

Cloud Composer 1 | Cloud Composer 2 | Cloud Composer 3

Halaman ini menjelaskan cara menggunakan Terraform untuk membuat lingkungan operasi DBT dan Cloud Composer terintegrasi.

Tentang modul terraform-google-dbt-composer-blueprint`

Modul terraform-google-dbt-composer-blueprint menggunakan Terraform untuk melakukan hal berikut:

  • Menerapkan API dan izin yang diperlukan dalam project.
  • Membuat bucket dokumentasi (untuk DBT).
  • Membuat lingkungan Cloud Composer, termasuk konfigurasi jaringan, dan akun layanan.
  • Menyalin di seluruh utilitas DAG untuk Cloud Composer
  • Mengekspor log audit untuk project ke project BigQuery, termasuk dua tampilan terwujud dan tampilan di bagian atas untuk mendukung dasbor.

Selain itu, modul ini memberikan contoh menyeluruh tentang penggunaan utilitas DAG dan membuat contoh tugas DBT di Cloud Composer.

Kode modul di GitHub

Untuk informasi selengkapnya dan contoh kode, lihat halaman modul terraform-google-dbt-composer-blueprint di GitHub.

Langkah selanjutnya