Liste des composants du pipeline Google Cloud

Les composants du pipeline Google Cloud sont publiés en deux étapes :

• Disponibilité générale (v1.0 et versions ultérieures)

• Preview

Pour en savoir plus, consultez les descriptions des étapes de lancement.

Composants en disponibilité générale (version 1.0 et versions ultérieures)

Les composants du pipeline Google Cloud en disponibilité générale (DG) sont disponibles dans l'espace de noms v1 du SDK des composants du pipeline Google Cloud. Ces composants disposent d'une interface stable et sont prêts à être utilisés dans un environnement de production.

Composants AutoML

Composants de prévision AutoML

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants liés aux prévisions AutoML :

• ProphetTrainerOp

Composants tabulaires d'AutoML

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants liés aux données tabulaires AutoML :

• CvTrainerOp
• EnsembleOp
• FinalizerOp
• InfraValidatorOp
• SplitMaterializedDataOp
• Stage1TunerOp
• StatsAndExampleGenOp
• TrainingConfiguratorAndValidatorOp
• TransformOp

Composants de jobs d'entraînement AutoML

Le SDK des composants du pipeline Google Cloud inclut les opérateurs suivants liés aux jobs d'entraînement AutoML :

• AutoMLForecastingTrainingJobRunOp
• AutoMLImageTrainingJobRunOp
• AutoMLTabularTrainingJobRunOp
• AutoMLTextTrainingJobRunOp
• AutoMLVideoTrainingJobRunOp

Composants de prédiction par lot

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants liés à la prédiction par lot :

• ModelBatchPredictOp

Composants BigQuery ML

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants pour la création et l'exécution des modèles de machine learning à l'aide de BigQuery :

• BigqueryCreateModelJobOp
• BigqueryDetectAnomaliesModelJobOp
• BigqueryDropModelJobOp
• BigqueryEvaluateModelJobOp
• BigqueryExplainForecastModelJobOp
• BigqueryExplainPredictModelJobOp
• BigqueryExportModelJobOp
• BigqueryForecastModelJobOp
• BigqueryMLAdvancedWeightsJobOp
• BigqueryMLArimaCoefficientsJobOp
• BigqueryMLArimaEvaluateJobOp
• BigqueryMLCentroidsJobOp
• BigqueryMLConfusionMatrixJobOp
• BigqueryMLFeatureImportanceJobOp
• BigqueryMLFeatureInfoJobOp
• BigqueryMLGlobalExplainJobOp
• BigqueryMLPrincipalComponentInfoJobOp
• BigqueryMLPrincipalComponentsJobOp
• BigqueryMLRecommendJobOp
• BigqueryMLReconstructionLossJobOp
• BigqueryMLRocCurveJobOp
• BigqueryMLTrainingInfoJobOp
• BigqueryMLTrialInfoJobOp
• BigqueryMLWeightsJobOp
• BigqueryPredictModelJobOp
• BigqueryQueryJobOp

Composants de jobs personnalisés

Le SDK des composants du pipeline Google Cloud inclut les opérateurs suivants pour l'exécution des composants KFP en tant que jobs d'entraînement personnalisé Vertex AI :

• CustomTrainingJobOp

Composants de Dataflow

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants liés à Dataflow :

• DataflowFlexTemplateJobOp
• DataflowPythonJobOp

Composants Dataproc sans serveur

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants liés à Dataproc sans serveur :

• DataprocPySparkBatchOp
• DataprocSparkBatchOp
• DataprocSparkRBatchOp
• DataprocSparkSqlBatchOp

Composants d'ensembles de données

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants pour la gestion des ressources dataset AutoML :

• GetVertexDatasetOp
• ImageDatasetCreateOp
• ImageDatasetExportDataOp
• ImageDatasetImportDataOp
• TabularDatasetCreateOp
• TabularDatasetExportDataOp
• TextDatasetCreateOp
• TextDatasetExportDataOp
• TextDatasetImportDataOp
• TimeSeriesDatasetCreateOp
• TimeSeriesDatasetExportDataOp
• VideoDatasetCreateOp
• VideoDatasetExportDataOp
• VideoDatasetImportDataOp

Composants de points de terminaison

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants liés aux points de terminaison de diffusion du modèle :

• EndpointCreateOp
• EndpointDeleteOp
• ModelDeployOp
• ModelUndeployOp

Composants de prévision

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants liés aux prévisions :

• ForecastingPrepareDataForTrainOp
• ForecastingPreprocessingOp
• ForecastingValidationOp

Composants de réglage des hyperparamètres

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants liés aux jobs de réglage des hyperparamètres :

• HyperparameterTuningJobRunOp

Composants de modèles

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants pour la gestion des modèles via Vertex AI Model Registry :

• ModelDeleteOp
• ModelExportOp
• ModelUploadOp

Composants d'évaluation de modèle

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants liés à l'évaluation des modèles :

• ModelEvaluationClassificationOp
• ModelEvaluationForecastingOp
• ModelEvaluationRegressionOp

Composants de notification par e-mail

Le SDK des composants du pipeline Google Cloud comprend les opérateurs suivants pour la gestion des notifications par e-mail :

• VertexNotificationEmailOp

Composants liés à l'attente de ressources

Le SDK des composants du pipeline Google Cloud comprend l'opérateur suivant lié à l'attente de création de ressource :

• WaitGcpResourcesOp

Composants en preview

Preview

Cette fonctionnalité est soumise aux "Conditions des offres de pré-DG" dans la section "Conditions d'utilisation générales" des Conditions spécifiques au service. Les fonctionnalités pré-DG sont disponibles "en l'état" et peuvent avoir une assistance limitée. Pour en savoir plus, consultez les descriptions des étapes de lancement.

Les composants du pipeline Google Cloud en phase preview sont disponibles dans l'espace de noms preview du SDK des composants du pipeline Google Cloud.

Composants AutoML

Composants de prévision AutoML

Le SDK des composants du pipeline Google Cloud comprend les opérateurs en preview suivants liés aux prévisions AutoML :

• ForecastingEnsembleOp
• ForecastingStage1TunerOp
• ForecastingStage2TunerOp

Composants tabulaires d'AutoML

Le SDK des composants du pipeline Google Cloud comprend les opérateurs en preview suivants liés aux données tabulaires d'AutoML :

• AutoFeatureEngineeringOp
• DistillationStageFeatureTransformEngineOp
• FeatureSelectionOp
• FeatureTransformEngineOp
• TabNetHyperparameterTuningJobOp
• TabNetTrainerOp
• WideAndDeepHyperparameterTuningJobOp
• WideAndDeepTrainerOp
• XGBoostHyperparameterTuningJobOp
• XGBoostTrainerOp

Composants de jobs personnalisés

Le SDK des composants du pipeline Google Cloud inclut les opérateurs en preview suivants pour l'exécution des composants KFP en tant que jobs d'entraînement personnalisé Vertex AI :

• CustomTrainingJobOp

Composants de Dataflow

Le SDK des composants du pipeline Google Cloud comprend les opérateurs en preview suivants liés à Dataflow :

• DataflowFlexTemplateJobOp

Composants de grand modèle de langage (LLM)

Le SDK des composants du pipeline Google Cloud comprend les opérateurs en preview suivants liés aux grands modèles de langage :

• infer_pipeline
• rlhf_pipeline

Composants d'évaluation de modèle

Le SDK des composants du pipeline Google Cloud comprend les opérateurs en preview suivants liés à l'évaluation des modèles :

• DetectDataBiasOp
• DetectModelBiasOp
• ModelEvaluationFeatureAttributionOp

Étapes suivantes

• Consultez les pages de référence suivantes pour obtenir des informations spécifiques sur les composants du pipeline Google Cloud :

  • Composants de Dataflow

  • Composants Dataproc sans serveur

  • Composants de CustomJob

  • Composant de prédiction par lot

  • Composants de modèles et de points de terminaison

  • Composant d'évaluation du modèle

  • Composants AutoML Vertex AI (aiplatform)