Dataform

Dataform Core memungkinkan data engineer dan analis data membuat definisi tabel secara terpusat, mengonfigurasi dependensi, menambahkan deskripsi kolom, dan mengonfigurasi pernyataan kualitas data dalam satu repositori hanya dengan menggunakan SQL.

Fungsi Dataform Core dapat digunakan secara bertahap dan bersifat tambahan, tanpa mengubah kode yang sudah ada.

Dataform Core adalah open source dan dapat digunakan secara lokal, memberi pengguna kebebasan dari ketergantungan, dan fleksibilitas untuk kasus penggunaan yang lebih kompleks. 

Dataform menangani infrastruktur operasional untuk memperbarui tabel Anda mengikuti dependensi di antara tabel Anda dan menggunakan versi terbaru kode Anda. Informasi data dan silsilah dapat dilacak secara lancar dengan integrasi Dataform. Picu alur kerja SQL secara manual, atau jadwalkan melalui Cloud Composer, Workflows, atau layanan pihak ketiga.

Menentukan tabel, memperbaiki masalah pesan error real-time, memvisualisasikan dependensi, commit perubahan ke Git, dan menjadwalkan pipeline dalam hitungan menit, dari satu antarmuka, tanpa meninggalkan browser web Anda. Hubungkan repositori Anda dengan penyedia pihak ketiga seperti GitHub dan GitLab. Commit perubahan dan kirim atau buka permintaan pull dari IDE.