Cloud Data Fusion のプラグインリファレンス

最も人気

最も一般的な Cloud Data Fusion プラグインをすばやく見つけてアクセスします。

BigQuery
このソースは、BigQuery テーブルのコンテンツ全体を読み取ります。
BigQuery の複数テーブル
このシンクは複数の BigQuery テーブルに書き込みます。データはまず Cloud Storage 上の一時的な場所に書き込まれ、そこから BigQuery に読み込まれます。
BigQuery テーブル
このシンクは BigQuery テーブルに書き込みます。データはまず Cloud Storage 上の一時的な場所に書き込まれ、そこから BigQuery に読み込まれます。
Cloud Storage
このソースプラグインは、Cloud Storage バケット内のパスからオブジェクトを読み取ります。
Cloud Storage
このシンクプラグインは、Cloud Storage のディレクトリにある 1 つ以上のファイルに、CSV、Avro、Parquet、JSON などのさまざまな形式でレコードを書き込みます。
マルチデータベーステーブル
データベース内の複数のテーブルから読み取ります。Cloud Storage マルチシンクや BigQuery マルチシンクなどのマルチシンクプラグインを使用して、1 つのパイプラインでデータベース全体からデータを読み込むために使用されます。
MySQL
構成可能な SQL クエリを使用して、MySQL インスタンスから読み取ります。クエリによって返された行ごとに 1 つのレコードを出力します。
Oracle
構成可能な SQL クエリを使用して、Oracle テーブルから読み取ります。クエリによって返された行ごとに 1 つのレコードを出力します。
Salesforce
このソースは Salesforce から商談、連絡先、アカウント、見込み顧客、任意のカスタムオブジェクトなどの sObject を一括して読み取ります。
SAP ODP
SAP ソースに接続し、Operational Data Provisioning（ODP）を使用してバッチベースおよびデルタベースのデータ抽出を行います。
SQL Server
構成可能な SQL クエリを使用して、SQL Server から読み取ります。クエリによって返された行ごとに 1 つのレコードを出力します。

Google Cloud

Cloud Storage、BigQuery、Cloud Bigtable、Datastore、Pub/Sub、Google Workspace など、Google Cloud プロダクトで使用可能なすべてのプラグインを確認できます。

集計

avg、count、count(*)、first、last、max、min、sum、collect などの関数（テーブル結合を含む）を集約するプラグイン。

アラート

アラートのプラグイン。

Apache

Apache 用のプラグイン。

API

各種 API 用のプラグイン。

Avro

Avro 用のプラグイン。

AWS

AWS で利用可能なプラグイン。

クレンジング

クレンジング用のプラグイン。

Cloud Storage

クラウドストレージで使用可能なプラグイン。

コード

独自のコードを実行するためのプラグイン。

圧縮

圧縮用のプラグイン。

条件次第

パイプラインには、条件形式の制御フロープラグインもあります。条件プラグインを使用すると、指定した条件述部の評価が true か false かに応じて、パイプラインを 2 つの別々のパスに分岐できます。

制御フロー

制御フロー用のプラグイン。

CRM

Salesforce などの CRM プラットフォーム用のプラグイン。

CSV

CSV 用のプラグイン。

データベース

データベース用のプラグイン。

データウェアハウス

データウェアハウス用のプラグイン。

DLP

Cloud Data Loss Prevention（DLP）用のプラグイン。

動的

動的プラグイン。

メールアドレス

メール用のプラグイン。

ファイル

ファイルプラグイン。

フィルタ

フィルタプラグイン

FTP

FTP プラグイン。

Google アナリティクス 360

Google アナリティクス 360 用のプラグイン。

Google Workspace

Google スプレッドシートや Google ドライブなどの Google Workspace 用のプラグイン。

Hadoop

Hadoop 用のプラグイン。

HDFS

HDFS 用のプラグイン。

HTTP

HTTP 用のプラグイン。

引数セッター
HTTP リクエストを実行して、パイプラインで設定する引数を取得します。

IBM

IBM 用のプラグイン。

JDBC

JDBC 用のプラグイン。

JSON

JSON 用のプラグイン。

Kafka

Kafka 用のプラグイン。

ログ

ログ用のプラグイン。

ウェブサーバーのログパーサー
任意の入力ソースからのログを解析し、URI、IP、ブラウザ、デバイス、HTTP ステータスコード、タイムスタンプなどの関連情報を取得します。

マッピング

マッピング用のプラグイン。

マスキング

マスキング用のプラグイン。

Microsoft

Microsoft Excel 用と Windows 用のプラグイン。

Microsoft Azure

Microsoft Azure データウェアハウス、データベース、クラウドストレージなどのプラグイン。

ネスト

ネストされたデータ用のプラグイン。

レコードのフラット化
ネストされたデータをフラットデータに変換するためのプラグイン。

NoSQL

NoSQL 用のプラグイン。

Oracle

Oracle 用のプラグイン。

Parquet

Parquet 用のプラグイン。

Python

Python 用のプラグイン。

S3

S3 用のプラグイン。

Amazon S3
このソースは、Amazon S3 からの読み取りが必要になるときに使用されます。

SAP

SaaS

Salesforce、ServiceNow、Zendesk などの一般的な SaaS プロダクト用のプラグイン。

検索

検索用のプラグイン。

Snowflake

Snowflake 用のプラグイン。

Spark

Spark 用のプラグイン。

SSH

SSH 用のプラグイン。

統計

統計情報用のプラグイン。

ストリーミング

ストリーミングプロダクト用のプラグイン。

テスト

テスト用のプラグイン。

ゴミ箱
入力したすべてのレコードを取り込んで消滅させます。つまり、出力は生成されず、どこにも保存されません。

Cloud Data Fusion のプラグイン

フィルタ

最も人気

Google Cloud

集計

アラート

Apache

API

Avro

AWS

クレンジング

Cloud Storage

コード

圧縮

条件次第

制御フロー

CRM

CSV

データベース

データ ウェアハウス

DLP

動的

メールアドレス

ファイル

フィルタ

FTP

Google アナリティクス 360

Google Workspace

Hadoop

HDFS

HTTP

IBM

JDBC

JSON

Kafka

ログ

マッピング

マスキング

Microsoft

Microsoft Azure

ネスト

NoSQL

Oracle

Parquet

Python

S3

SAP

SaaS

検索

Snowflake

Spark

SSH

統計

ストリーミング

テスト

XML

次のステップ

信頼できるパートナーと連携する

Google Cloud を使ってみる

すぐに使えるソリューションをデプロイする

データウェアハウス