Pola referensi

Halaman ini menyediakan link ke kode contoh dan panduan referensi teknis untuk kasus penggunaan Dataflow umum. Gunakan referensi ini untuk mempelajari, mengidentifikasi praktik terbaik, dan mem-build fitur dengan kode contoh.

Pola referensi yang tercantum di sini berorientasi kode dan dimaksudkan untuk memudahkan Anda mengimplementasikan dengan cepat. Untuk melihat berbagai solusi Dataflow yang lebih luas, tinjau daftar panduan referensi teknis Dataflow.

Analisis umum

Solusi Deskripsi Link
Membuat dasbor analisis situs secara real-time

Pelajari cara membuat dasbor yang menyediakan metrik real-time yang dapat Anda gunakan untuk memahami performa insentif atau eksperimen di situs Anda.

Kode contoh: Analisis Realtime menggunakan Dataflow dan Memorystore

Video ringkasan: Level Up - Analisis real-time menggunakan Dataflow dan Memorystore

Membuat pipeline untuk mentranskripsikan dan menganalisis file ucapan

Gunakan Dataflow untuk mentranskripsi dan menganalisis file ucapan yang diupload, lalu simpan data tersebut ke BigQuery untuk digunakan dalam visualisasi.

Kode contoh: Framework Analisis Ucapan

Analisis log

Solusi Deskripsi Link
Mem-build pipeline untuk mencatat interaksi Dialogflow

Gunakan Dataflow untuk membuat pipeline guna menangkap dan menyimpan interaksi Dialogflow guna analisis lebih lanjut.

Kode contoh: Parser log Dialogflow

Pengenalan pola

Solusi Deskripsi Link
Mendeteksi objek dalam klip video

Solusi ini menunjukkan cara membangun solusi analisis klip video real-time untuk pelacakan objek menggunakan Dataflow dan Video Intelligence API, yang memungkinkan Anda menganalisis data tidak terstruktur dalam jumlah besar mendekati real time.

Kode contoh: Solusi Analisis Video Menggunakan Dataflow dan Video Intelligence API

Apache Beam Ptransform untuk memanggil Video Intelligence API: modul apache_beam.ml.gcp.videointelligenceml

Menganonimkan (de-identifikasi) dan mengidentifikasi ulang data PII di pipeline analisis smart Anda Seri solusi ini menunjukkan cara menggunakan Dataflow, Sensitive Data Protection, BigQuery, dan Pub/Sub untuk melakukan de-identifikasi dan mengidentifikasi ulang informasi identitas pribadi (PII) dalam set data sampel.

Panduan referensi teknis:

Kode contoh: Memigrasikan Data Sensitif di BigQuery Menggunakan Dataflow dan Cloud Data Loss Prevention

Perkiraan prediktif

Solusi Deskripsi Link
Memprediksi kegagalan mekanis menggunakan pipeline analisis vision

Solusi ini memandu Anda dalam membuat pipeline Dataflow untuk mendapatkan insight dari file gambar berskala besar yang disimpan di bucket Cloud Storage. Pemeriksaan visual otomatis dapat membantu memenuhi sasaran manufaktur, seperti meningkatkan proses kontrol kualitas atau memantau keselamatan pekerja, sekaligus mengurangi biaya.

Kode contoh: Solusi Analisis Visi Menggunakan Dataflow dan Cloud Vision API