Google Cloud 流水线组件分两个阶段发布:
正式版(v1.0 及更高版本)
预览版
如需了解详情,请参阅发布阶段说明。
正式版(1.0 及更高版本)组件
正式版 (GA) Google Cloud 流水线组件可在 Google Cloud 流水线组件 SDK 的 v1
命名空间中获得。这些组件具有稳定的接口,可直接在生产环境中使用。
AutoML 组件
AutoML 预测组件
Google Cloud 流水线组件 SDK 包括以下与 AutoML 预测相关的运算符:
AutoML 表格组件
Google Cloud 流水线组件 SDK 包括以下与 AutoML 表格相关的运算符:
-
CvTrainerOp
-
EnsembleOp
-
FinalizerOp
-
InfraValidatorOp
-
SplitMaterializedDataOp
-
Stage1TunerOp
-
StatsAndExampleGenOp
-
TrainingConfiguratorAndValidatorOp
-
TransformOp
AutoML 训练作业组件
Google Cloud 流水线组件 SDK 包括以下与 AutoML 训练作业相关的运算符:
-
AutoMLForecastingTrainingJobRunOp
-
AutoMLImageTrainingJobRunOp
-
AutoMLTabularTrainingJobRunOp
-
AutoMLTextTrainingJobRunOp
-
AutoMLVideoTrainingJobRunOp
批量预测组件
Google Cloud 流水线组件 SDK 包括以下与批量预测相关的运算符:
BigQuery ML 组件
Google Cloud 流水线组件 SDK 包括以下运算符,用于使用 BigQuery 创建和执行机器学习模型:
-
BigqueryCreateModelJobOp
-
BigqueryDetectAnomaliesModelJobOp
-
BigqueryDropModelJobOp
-
BigqueryEvaluateModelJobOp
-
BigqueryExplainForecastModelJobOp
-
BigqueryExplainPredictModelJobOp
-
BigqueryExportModelJobOp
-
BigqueryForecastModelJobOp
-
BigqueryMLAdvancedWeightsJobOp
-
BigqueryMLArimaCoefficientsJobOp
-
BigqueryMLArimaEvaluateJobOp
-
BigqueryMLCentroidsJobOp
-
BigqueryMLConfusionMatrixJobOp
-
BigqueryMLFeatureImportanceJobOp
-
BigqueryMLFeatureInfoJobOp
-
BigqueryMLGlobalExplainJobOp
-
BigqueryMLPrincipalComponentInfoJobOp
-
BigqueryMLPrincipalComponentsJobOp
-
BigqueryMLRecommendJobOp
-
BigqueryMLReconstructionLossJobOp
-
BigqueryMLRocCurveJobOp
-
BigqueryMLTrainingInfoJobOp
-
BigqueryMLTrialInfoJobOp
-
BigqueryMLWeightsJobOp
-
BigqueryPredictModelJobOp
-
BigqueryQueryJobOp
自定义作业组件
Google Cloud 流水线组件 SDK 包括以下运算符,用于将 KFP 组件作为 Vertex AI 自定义训练作业运行:
Dataflow 组件
Google Cloud 流水线组件 SDK 包括以下与 Dataflow 相关的运算符:
Dataproc 无服务器组件
Google Cloud 流水线组件 SDK 包括与 Dataproc 无服务器相关的以下运算符:
数据集组件
Google Cloud 流水线组件 SDK 包括以下用于 AutoML dataset
资源管理的运算符:
-
GetVertexDatasetOp
-
ImageDatasetCreateOp
-
ImageDatasetExportDataOp
-
ImageDatasetImportDataOp
-
TabularDatasetCreateOp
-
TabularDatasetExportDataOp
-
TextDatasetCreateOp
-
TextDatasetExportDataOp
-
TextDatasetImportDataOp
-
TimeSeriesDatasetCreateOp
-
TimeSeriesDatasetExportDataOp
-
VideoDatasetCreateOp
-
VideoDatasetExportDataOp
-
VideoDatasetImportDataOp
端点组件
Google Cloud 流水线组件 SDK 包括以下与模型部署端点相关的运算符:
预测组件
Google Cloud 流水线组件 SDK 包括以下与预测相关的运算符:
超参数调优组件
Google Cloud 流水线组件 SDK 包括以下与超参数调优作业相关的运算符:
模型组件
Google Cloud 流水线组件 SDK 包括以下运算符,用于通过 Vertex AI Model Registry 管理模型:
模型评估组件
Google Cloud 流水线组件 SDK 包括以下与模型评估相关的运算符:
电子邮件通知组件
Google Cloud 流水线组件 SDK 包括以下用于管理电子邮件通知的运算符:
与等待资源相关的组件
Google Cloud 流水线组件 SDK 包括以下与等待资源创建相关的运算符:
预览版组件
处于预览版阶段的 Google Cloud 流水线组件可在 Google Cloud 流水线组件 SDK 的 preview
命名空间中获得。
AutoML 组件
AutoML 预测组件
Google Cloud 流水线组件 SDK 包括以下与 AutoML 预测相关的预览版运算符:
AutoML 表格组件
Google Cloud 流水线组件 SDK 包括以下与 AutoML 表格相关的预览版运算符:
-
AutoFeatureEngineeringOp
-
DistillationStageFeatureTransformEngineOp
-
FeatureSelectionOp
-
FeatureTransformEngineOp
-
TabNetHyperparameterTuningJobOp
-
TabNetTrainerOp
-
WideAndDeepHyperparameterTuningJobOp
-
WideAndDeepTrainerOp
-
XGBoostHyperparameterTuningJobOp
-
XGBoostTrainerOp
自定义作业组件
Google Cloud 流水线组件 SDK 包括以下预览版运算符,用于将 KFP 组件作为 Vertex AI 自定义训练作业运行:
Dataflow 组件
Google Cloud 流水线组件 SDK 包括以下与 Dataflow 相关的预览版运算符:
大语言模型 (LLM) 组件
Google Cloud 流水线组件 SDK 包括以下与 LLM 相关的预览版运算符:
模型评估组件
Google Cloud 流水线组件 SDK 包括以下与模型评估相关的预览版运算符:
后续步骤
请参阅以下参考页面,了解特定的 Google Cloud 流水线组件信息: