Cloud Data Fusion 外掛程式

外掛程式為可自訂模組,可用於擴充 Cloud Data Fusion 的功能。外掛程式有來源、轉換、數據分析、動作、接收器、錯誤處理常式、快訊發布器和條件等不同類型。以下外掛程式參考資料表完整列出了 Cloud Data Fusion 中所有可用的外掛程式。如果您需要的外掛程式不在此列,則可使用 Cloud Data Fusion 的外掛程式 API 自行建構外掛程式。

下表說明 Cloud Data Fusion 中各類可用的外掛程式。

類型 說明
來源 來源外掛程式為連接器,可連接至您取得資料的資料庫、檔案或即時串流,讓您使用簡易 UI 擷取資料,無須擔心如何撰寫低層級連線的程式碼。
轉換 轉換外掛程式可讓您在擷取資料後加以控管,例如,您可以複製記錄、將資料設為 JSON 格式,甚至可運用 JavaScript 外掛程式來撰寫自訂轉換。
數據分析 數據分析外掛程式可用於執行不同來源的資料匯總作業 (如資料分組和合併作業),以及執行數據分析和機器學習作業。Data Fusion 提供內建的外掛程式,能以多樣化的方式應用於前述的各項作業。
動作 動作外掛程式會定義工作流程期間排定要採取的自訂動作,但不會在流程中直接控管資料。例如,您可以使用資料庫自訂動作,藉此在管道尾端執行任意資料庫指令。另外,您也可以觸發在 Cloud Storage 內移動檔案的動作。
接收器 資料必須寫入接收器。Cloud Data Fusion 包含如 Cloud Storage、BigQuery、Cloud Spanner、關聯資料庫、檔案系統和大型主機等各種接收器。
錯誤處理常式 節點出現空值、邏輯錯誤或其他錯誤來源時,您可以使用錯誤處理常式外掛程式來捕捉錯誤。您可以將這類外掛程式連接至轉換或數據分析外掛程式的輸出內容,以用於捕捉錯誤。接著,再於管道中以另一個錯誤處理流程來處理這些錯誤。
快訊發布器 快訊發布器是另一類外掛程式,可讓您在發生不尋常的事件時發布通知。下游程序可訂閱這些通知,藉此觸發這些快訊的自訂處理作業。
條件 管道也提供條件形式的流程控管外掛程式。條件外掛程式可讓您根據特定條件述詞計算出的 True 或 False 邏輯值,將管道分為兩個不同路徑。