Kembangkan dan operasionalkan pipeline transformasi data yang skalabel di BigQuery menggunakan SQL.
Mengembangkan tabel yang diseleksi, terbaru, tepercaya, dan didokumentasikan di BigQuery
Dukung analis data dan insinyur data berkolaborasi di repositori yang sama
Membangun pipeline data yang skalabel di BigQuery menggunakan SQL
Mengintegrasikan dengan GitHub dan GitLab
Terus perbarui tabel tanpa mengelola infrastruktur
Manfaat
Kembangkan dan operasionalkan pipeline data skalabel di BigQuery menggunakan SQL dari satu lingkungan dan tanpa dependensi tambahan.
Dengan Dataform, tim data mengelola kode SQL dan definisi aset data dengan mengikuti praktik terbaik software engineering—seperti kontrol versi, lingkungan, pengujian, dan dokumentasi.
Dataform menghilangkan kompleksitas pembuatan pipeline SQL. Analis data dapat mengelola dependensi, mengonfigurasi pengujian kualitas data, dan mengatur pipeline kompleks menggunakan SQL.
Fitur utama
Dataform Core memungkinkan data engineer dan analis data membuat definisi tabel secara terpusat, mengonfigurasi dependensi, menambahkan deskripsi kolom, dan mengonfigurasi pernyataan kualitas data dalam satu repositori hanya dengan menggunakan SQL.
Fungsi Dataform Core dapat digunakan secara bertahap dan bersifat tambahan, tanpa mengubah kode yang sudah ada.
Dataform Core adalah open source dan dapat digunakan secara lokal, memberi pengguna kebebasan dari ketergantungan, dan fleksibilitas untuk kasus penggunaan yang lebih kompleks.
Dataform menangani infrastruktur operasional untuk memperbarui tabel Anda mengikuti dependensi di antara tabel Anda dan menggunakan versi terbaru kode Anda. Informasi data dan silsilah dapat dilacak secara lancar dengan integrasi Dataform. Picu alur kerja SQL secara manual, atau jadwalkan melalui Cloud Composer, Workflows, atau layanan pihak ketiga.
Menentukan tabel, memperbaiki masalah pesan error real-time, memvisualisasikan dependensi, commit perubahan ke Git, dan menjadwalkan pipeline dalam hitungan menit, dari satu antarmuka, tanpa meninggalkan browser web Anda. Hubungkan repositori Anda dengan penyedia pihak ketiga seperti GitHub dan GitLab. Commit perubahan dan kirim atau buka permintaan pull dari IDE.
Dokumentasi
Harga
Dataform adalah layanan gratis.
Mungkin ada biaya terkait dari layanan lain saat menggunakan produk tersebut.
Mulailah membangun solusi di Google Cloud dengan kredit gratis senilai $300 dan lebih dari 20 produk yang selalu gratis.