Google Cloud Pipeline コンポーネント一覧

Google Cloud のパイプライン コンポーネントは、次の 2 つのステージでリリースされます。

• 一般提供（v1.0 以降）

• プレビュー

詳細については、リリース ステージの説明をご覧ください。

一般提供（1.0 以降）のコンポーネント

一般提供（GA）の Google Cloud パイプライン コンポーネントは、Google Cloud Pipeline Components SDK の v1 名前空間で使用できます。これらのコンポーネントは安定したインターフェースを備えており、本番環境ですぐに使用できます。

AutoML コンポーネント

AutoML 予測コンポーネント

Google Cloud Pipeline Components SDK には、AutoML 予測に関連する次のオペレーターが含まれています。

• ProphetTrainerOp

AutoML Tabular コンポーネント

Google Cloud Pipeline Components SDK には、AutoML 表形式に関連する次のオペレーターが含まれています。

• CvTrainerOp
• EnsembleOp
• FinalizerOp
• InfraValidatorOp
• SplitMaterializedDataOp
• Stage1TunerOp
• StatsAndExampleGenOp
• TrainingConfiguratorAndValidatorOp
• TransformOp

AutoML トレーニング ジョブのコンポーネント

Google Cloud Pipeline Components SDK には、AutoML トレーニング ジョブに関連する次のオペレーターが含まれています。

• AutoMLForecastingTrainingJobRunOp
• AutoMLImageTrainingJobRunOp
• AutoMLTabularTrainingJobRunOp
• AutoMLTextTrainingJobRunOp
• AutoMLVideoTrainingJobRunOp

バッチ予測のコンポーネント

Google Cloud Pipeline Components SDK には、バッチ予測に関連する次のオペレーターが含まれています。

• ModelBatchPredictOp

BigQuery ML コンポーネント

Google Cloud Pipeline Components SDK には、BigQuery を使用して ML モデルを作成して実行するための次のオペレーターが含まれています。

• BigqueryCreateModelJobOp
• BigqueryDetectAnomaliesModelJobOp
• BigqueryDropModelJobOp
• BigqueryEvaluateModelJobOp
• BigqueryExplainForecastModelJobOp
• BigqueryExplainPredictModelJobOp
• BigqueryExportModelJobOp
• BigqueryForecastModelJobOp
• BigqueryMLAdvancedWeightsJobOp
• BigqueryMLArimaCoefficientsJobOp
• BigqueryMLArimaEvaluateJobOp
• BigqueryMLCentroidsJobOp
• BigqueryMLConfusionMatrixJobOp
• BigqueryMLFeatureImportanceJobOp
• BigqueryMLFeatureInfoJobOp
• BigqueryMLGlobalExplainJobOp
• BigqueryMLPrincipalComponentInfoJobOp
• BigqueryMLPrincipalComponentsJobOp
• BigqueryMLRecommendJobOp
• BigqueryMLReconstructionLossJobOp
• BigqueryMLRocCurveJobOp
• BigqueryMLTrainingInfoJobOp
• BigqueryMLTrialInfoJobOp
• BigqueryMLWeightsJobOp
• BigqueryPredictModelJobOp
• BigqueryQueryJobOp

カスタムジョブのコンポーネント

Google Cloud Pipeline Components SDK には、Vertex AI カスタム トレーニング ジョブとして KFP コンポーネントを実行するための次のオペレーターが含まれています。

• CustomTrainingJobOp

Dataflow コンポーネント

Google Cloud Pipeline Components SDK には、Dataflow に関連する次のオペレーターが含まれています。

• DataflowFlexTemplateJobOp
• DataflowPythonJobOp

Dataproc サーバーレス コンポーネント

Google Cloud Pipeline Components SDK には、Dataproc Serverless に関連する次のオペレーターが含まれています。

• DataprocPySparkBatchOp
• DataprocSparkBatchOp
• DataprocSparkRBatchOp
• DataprocSparkSqlBatchOp

データセット コンポーネント

Google Cloud Pipeline Components SDK には、AutoML dataset リソース管理用の次のオペレーターが含まれています。

• GetVertexDatasetOp
• ImageDatasetCreateOp
• ImageDatasetExportDataOp
• ImageDatasetImportDataOp
• TabularDatasetCreateOp
• TabularDatasetExportDataOp
• TextDatasetCreateOp
• TextDatasetExportDataOp
• TextDatasetImportDataOp
• TimeSeriesDatasetCreateOp
• TimeSeriesDatasetExportDataOp
• VideoDatasetCreateOp
• VideoDatasetExportDataOp
• VideoDatasetImportDataOp

エンドポイント コンポーネント

Google Cloud Pipeline Components SDK には、モデル提供エンドポイントに関連する次のオペレーターが含まれています。

• EndpointCreateOp
• EndpointDeleteOp
• ModelDeployOp
• ModelUndeployOp

予測コンポーネント

Google Cloud Pipeline Components SDK には、予測に関連する次のオペレーターが含まれています。

• ForecastingPrepareDataForTrainOp
• ForecastingPreprocessingOp
• ForecastingValidationOp

ハイパーパラメータ チューニング コンポーネント

Google Cloud Pipeline Components SDK には、ハイパーパラメータ チューニング ジョブに関連する次のオペレーターが含まれています。

• HyperparameterTuningJobRunOp

モデル コンポーネント

Google Cloud Pipeline Components SDK には、Vertex AI Model Registry でモデルを管理するための次のオペレーターが含まれています。

• ModelDeleteOp
• ModelExportOp
• ModelUploadOp

モデル評価のコンポーネント

Google Cloud Pipeline Components SDK には、モデル評価に関連する次のオペレーターが含まれています。

• ModelEvaluationClassificationOp
• ModelEvaluationForecastingOp
• ModelEvaluationRegressionOp

メール通知のコンポーネント

Google Cloud Pipeline Components SDK には、メール通知を管理するための次のオペレーターが含まれています。

• VertexNotificationEmailOp

リソース待機に関連するコンポーネント

Google Cloud Pipeline Components SDK には、リソース作成の待機に関連する次のオペレーターが含まれています。

• WaitGcpResourcesOp

プレビュー コンポーネント

プレビュー

この機能には、サービス固有の利用規約の「一般的なサービス規約」の「pre-GA サービス規約」が適用されます。 pre-GA の機能は「現状有姿」で利用できますが、サポートが制限される場合があります。 詳しくは、リリース ステージの説明をご覧ください。

プレビュー段階の Google Cloud パイプライン コンポーネントは、Google Cloud Pipeline Components SDK の preview 名前空間で使用できます。

AutoML コンポーネント

AutoML 予測コンポーネント

Google Cloud Pipeline Components SDK には、AutoML 予測に関連する次のプレビュー版オペレーターが含まれています。

• ForecastingEnsembleOp
• ForecastingStage1TunerOp
• ForecastingStage2TunerOp

AutoML Tabular コンポーネント

Google Cloud Pipeline Components SDK には、AutoML 表形式に関連する次のプレビュー版オペレーターが含まれています。

• AutoFeatureEngineeringOp
• DistillationStageFeatureTransformEngineOp
• FeatureSelectionOp
• FeatureTransformEngineOp
• TabNetHyperparameterTuningJobOp
• TabNetTrainerOp
• WideAndDeepHyperparameterTuningJobOp
• WideAndDeepTrainerOp
• XGBoostHyperparameterTuningJobOp
• XGBoostTrainerOp

カスタムジョブのコンポーネント

Google Cloud Pipeline Components SDK には、Vertex AI カスタム トレーニング ジョブとして KFP コンポーネントを実行するための次のプレビュー版オペレーターが含まれています。

• CustomTrainingJobOp

Dataflow コンポーネント

Google Cloud Pipeline Components SDK には、Dataflow に関連する次のプレビュー版オペレーターが含まれています。

• DataflowFlexTemplateJobOp

大規模言語モデル（LLM）のコンポーネント

Google Cloud Pipeline Components SDK には、LLM に関連する次のプレビュー版オペレーターが含まれています。

• infer_pipeline
• rlhf_pipeline

モデル評価のコンポーネント

Google Cloud Pipeline Components SDK には、モデル評価に関連する次のプレビュー版オペレーターが含まれています。

• DetectDataBiasOp
• DetectModelBiasOp
• ModelEvaluationFeatureAttributionOp

次のステップ

• Google Cloud Pipeline コンポーネントの具体的な情報については、以下のリファレンス ページをご覧ください。

  • Dataflow コンポーネント

  • Dataproc サーバーレス コンポーネント

  • CustomJob コンポーネント

  • バッチ予測コンポーネント

  • モデル コンポーネントとエンドポイント コンポーネント

  • モデル評価コンポーネント

  • Vertex AI（aiplatform）AutoML コンポーネント