リファレンス パターン

このページでは、よく使用される Dataflow ユースケースのサンプルコードと技術リファレンス ガイドへのリンクを紹介します。これらのリソースを使用してベスト プラクティスを理解し、サンプルコードを使用して機能を構築してください。

ここに示すリファレンス パターンはコード指向であり、短時間で実装できます。広範な Dataflow ソリューションについては、Dataflow 技術リファレンス ガイドのリストをご覧ください。

一般的な分析

ソリューション 説明 リンク
リアルタイム ウェブサイト分析ダッシュボードを作成する

ウェブサイト上のインセンティブやテストのパフォーマンスを把握するためにリアルタイムの指標を提供するダッシュボードの作成方法を学びます。

サンプルコード: Dataflow と Memorystore を使用したリアルタイム分析

概要の動画: レベルアップ - Dataflow と Memorystore を使用したリアルタイム分析

音声ファイルの音声文字変換と分析を行うためのパイプラインの作成

Dataflow を使用して、アップロードされた音声ファイルを音声文字変換して分析し、そのデータを可視化で使用するために BigQuery に保存します。

サンプルコード: Speech Analysis Framework

ログ分析

ソリューション 説明 リンク
Dialogflow インタラクションをキャプチャするパイプラインを構築する

Dataflow を使用してパイプラインを作成し、Dialogflow インタラクションをキャプチャして保存し、さらに分析します。

サンプルコード: Dialogflow ログパーサー

パターン認識

ソリューション 説明 リンク
動画クリップ内のオブジェクトの検出

このソリューションでは、Dataflow と Video Intelligence API を使用してオブジェクト追跡用のリアルタイム動画クリップ分析ソリューションを作成し、大容量の非構造化データをほぼリアルタイムで分析する方法について説明します。

サンプルコード: Dataflow と Video Intelligence API を使用した動画分析ソリューション

Video Intelligence API を呼び出す Apache Beam Ptransform: apache_beam.ml.gcp.videointelligenceml モジュール

スマート アナリティクス パイプラインでの PII データの匿名化(非識別化)と再識別 この一連のソリューションでは、Dataflow、機密データの保護、BigQuery、Pub/Sub を使用して、サンプル データセット内にある個人情報(PII)の非識別化と再識別を行う方法を示します。

技術リファレンス ガイド:

サンプルコード: Dataflow と Cloud Data Loss Prevention を使用して BigQuery で機密データを移行する

見通し予測

ソリューション 説明 リンク
可視分析パイプラインを使用して機械的な障害を予測する

このソリューションでは、Cloud Storage バケットに保存されている大規模な画像ファイルから分析情報を取得するための Dataflow パイプラインを構築する方法を説明します。自動化されたビジュアル検査は、費用を抑えながら、品質管理プロセスの改善やワーカーの安全性のモニタリングなどの製造目標の達成に役立ちます。

サンプルコード: Dataflow と Cloud Vision API を使用した可視分析ソリューション