Stato del supporto delle versioni degli SDK

Questa pagina elenca lo stato del supporto di Dataflow per le release dell'SDK Apache Beam e dell'SDK Dataflow:

Definizioni del livello di assistenza dell'SDK Apache Beam

Di seguito sono riportati i livelli di assistenza di Dataflow per l'SDK Apache Beam:

  • Supportate: le versioni dell'SDK Apache Beam sono supportate da Dataflow dalla data di rilascio fino alla data di ritiro.
  • Ritiro: quando una versione dell'SDK viene ritirata, continua a funzionare con Dataflow, ma potrebbe essere dismessa in futuro. Prima della disattivazione di una versione dell'SDK, i clienti vengono informati e hanno il tempo di eseguire l'upgrade dei propri ambienti. Le richieste di job inviate da versioni SDK ritirate generano un messaggio di avviso. Ti consigliamo di aggiornare gli ambienti che utilizzano una versione deprecata di un SDK a una versione supportata, ma le versioni deprecate dell'SDK continuano a funzionare con Dataflow.
  • Ritirate: le versioni dell'SDK ritirate non funzionano più con Dataflow. Le richieste di job inviate da versioni SDK ritirate generano un errore. Per utilizzare l'SDK con Dataflow, devi aggiornare l'ambiente a una versione dell'SDK che non è stata ritirata. Ti consigliamo di aggiornare l'SDK a una versione supportata. Le versioni dell'SDK raramente vengono ritirate. Prima del ritiro di una versione dell'SDK, ai clienti viene inviata una notifica e viene concesso loro il tempo di eseguire l'upgrade dei propri ambienti.

Le definizioni precedenti non si applicano agli SDK o alle funzionalità che non sono mai state supportate.

SDK Apache Beam 2.x

Apache Beam è un progetto open source guidato dalla community. Google e Google Cloud fanno parte della community Apache Beam, ma non ne sono proprietari né controllano il processo di rilascio. Potremmo aprire bug o inviare patch al codice sorgente di Apache Beam per conto dei clienti di Dataflow. Non possiamo creare hotfix o release ufficiali di Apache Beam su richiesta. Per ulteriori dettagli sulle norme di rilascio, consulta la pagina Norme di Apache Beam.

Dataflow supporta componenti SDK Apache Beam specifici per le release dell'SDK elencate in questa pagina. Questi componenti sono stati testati a fondo con Dataflow. Le funzionalità sperimentali non sono supportate.

Per informazioni sulle modifiche, consulta le note di rilascio di Apache Beam.

Le seguenti tabelle contengono lo stato del supporto per gli SDK Apache Beam 2.x, tra cui l'SDK Apache Beam per Python, l'SDK Apache Beam per Java e l'SDK Apache Beam per Go:

Java

Versione SDK Stato Componenti supportati Dettagli
2.61.0 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Questa versione verrà ritirata il 25 novembre 2025.
2.60.0 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Questa versione verrà ritirata il 17 ottobre 2025.
2.59.0 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Questa versione verrà ritirata l'11 settembre 2025.
2.58.1 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Questa versione verrà ritirata il 16 agosto 2025.
2.58.0 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Questa versione verrà ritirata il 6 agosto 2025.
2.57.0 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Questa versione verrà ritirata il 26 giugno 2025.
2.56.0 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Questa versione verrà ritirata il 1° maggio 2025.
2.55.1 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Questa versione verrà ritirata l'8 aprile 2025.
2.55.0 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql

Questa versione verrà ritirata il 25 marzo 2025.

Problema noto: la trasformazione WriteToJson nelle pipeline tra lingue non va a buon fine a causa di un errore. Per risolvere il problema, esegui l'upgrade ad Apache Beam 2.55.1. Per ulteriori informazioni, consulta Issue #30776: Beam YAML WriteToJson fails.
2.54.0 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Questa versione verrà ritirata il 14 febbraio 2025.
2.53.0 Supportato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Questa versione verrà ritirata il 4 gennaio 2025.
2.52.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritiro previsto per il 17 novembre 2024.
2.51.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritirata il 12 ottobre 2024.
2.50.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritiro previsto per il 30 agosto 2024.
2.49.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritirata il 17 luglio 2024.
2.48.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritiro previsto per il 31 maggio 2024.
2.47.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritiro previsto per il 10 maggio 2024.
2.46.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritiro previsto per il 10 marzo 2024.
2.45.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritirata il 15 febbraio 2024.
2.44.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Non sarà più disponibile a partire dal 13 gennaio 2024.
2.43.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritirata il 17 novembre 2023.
2.42.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritirata il 17 ottobre 2023.
2.41.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritirata il 23 agosto 2023.
2.40.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Non sarà più disponibile a partire dal 27 giugno 2023.
2.39.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Sarà deprecato il 25 maggio 2023.
2.38.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritirata il 20 aprile 2023.
2.37.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritirata il 4 marzo 2023.
2.36.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Ritirata il 7 febbraio 2023.
2.35.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Sarà deprecato il 29 dicembre 2022.
2.34.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
I connettori I/O di Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
 Ritirata l'11 novembre 2022.
2.33.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
 Ritirata il 7 ottobre 2022.
2.32.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
 Ritirato il 25 agosto 2022.
2.31.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
 Ritirata l'8 luglio 2022.
2.30.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
 Ritirato il 10 giugno 2022.
2.29.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirata il 29 aprile 2022.

Problema noto: se utilizzi Runner 2, per impostazione predefinita Dataflow utilizzerà un contenitore SDK Java 8 indipendentemente dalla versione Java dell'utente. Per risolvere il problema per Java 11, puoi eseguire l'override dell'immagine SDK predefinita fornendo l'opzione della pipeline `--worker_harness_container_image=gcr.io/cloud-dataflow/v1beta3/beam_java11_sdk:2.29.0`. Per ulteriori informazioni, consulta il tracker dei problemi di Apache Beam.

2.28.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirata il 22 febbraio 2022.
2.27.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

È stato ritirato il 7 gennaio 2022.

Questa release aggiunge il supporto per JDK 11.
2.26.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritiro previsto per l'11 dicembre 2021.
2.25.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirata il 23 ottobre 2021.
2.24.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Non più supportato dal 18 settembre 2021.

Problema noto: se utilizzi timer che si reimpostano anziché quelli impostati e attivati una sola volta, non devi eseguire l'upgrade alla versione 2.24.0. Quando un timer viene attivato, ma viene reimpostato prima di essere eseguito, può verificarsi una perdita di una preautorizzazione della filigrana, provocando il blocco del job della pipeline. Per ulteriori informazioni, consulta il tracker dei problemi di Apache Beam.
2.23.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirata il 29 luglio 2021.
2.22.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Connettori I/O Google Cloud nel modulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Non più supportato dall'8 giugno 2021.
2.21.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirata il 27 maggio 2021.
2.20.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritiro previsto per il 15 aprile 2021.
2.19.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritiro previsto per il 4 febbraio 2021.
2.18.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirata il 23 gennaio 2021.
2.17.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

È stato ritirato il 6 gennaio 2021.
2.16.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirato il 7 ottobre 2020.
2.15.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirato il 23 agosto 2020.

Problemi noti:
  • Gli utenti di Dataflow che utilizzano le funzionalità dello schema (incluse le trasformazioni SQL) non devono eseguire l'upgrade alla versione 2.15.0 a causa di un problema noto. Per ulteriori informazioni, consulta il tracker dei problemi di Apache Beam.
2.14.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritiro previsto per il 1° agosto 2020.
2.13.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirata il 6 giugno 2020.

Questa release aggiunge il supporto sperimentale per JDK 9 e versioni successive. Per ulteriori informazioni, consulta il tracker dei problemi di Apache Beam.
2.12.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirata il 25 aprile 2020.

Problemi noti:
  • Il programma di esecuzione di Dataflow ha una configurazione di logging sbagliata che potrebbe causare la mancanza di tutti i log. Per risolvere il problema, aggiungi slf4j-jdk14 alle dipendenze di runtime.
2.11.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirata a partire dal 1° marzo 2020.

Problemi noti:
  • Il programma di esecuzione di Dataflow ha una configurazione di logging sbagliata che potrebbe causare la mancanza di tutti i log. Per risolvere il problema, aggiungi slf4j-jdk14 alle dipendenze di runtime.
2.10.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Ritirata a partire dall'11 febbraio 2020.

Problemi noti:
  • L'SDK 2.10.0 dipende dalla libreria client gcsio versione 1.9.13, che presenta problemi noti:

    Per risolvere questi problemi, esegui l'upgrade all'SDK 2.11.0 o sostituisci la versione della libreria client gcsio con 1.9.16 o versioni successive.

  • Il programma di esecuzione di Dataflow ha una configurazione di logging sbagliata che potrebbe causare la mancanza di tutti i log. Per risolvere il problema, aggiungi slf4j-jdk14 alle dipendenze di runtime.
2.9.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Funzionalità ritirata a partire dal 13 dicembre 2019.

Problemi noti:
  • Se attivi l'esperimento Streaming Engine (beta), non eseguire l'upgrade all'SDK 2.9.0 a causa di un problema noto. Se scegli di utilizzare l'SDK 2.9.0, devi anche impostare il flag sperimentale enable_conscrypt_security_provider per attivare Conscrypt, che presenta noti problemi di stabilità.
  • In un caso specifico, gli utenti degli SDK Java Apache Beam 2.9.0 e versioni precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.8.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

È stata ritirata il 25 ottobre 2019.

Problemi noti:
  • Le pipeline potrebbero bloccarsi a causa di un problema con la libreria Conscrypt. Se in Stackdriver Logging vengono visualizzati errori con tracce di stack che includono chiamate correlate a Conscrypt, potresti essere interessato da questo problema. Per risolvere il problema, esegui l'upgrade all'SDK 2.9.0 o versioni successive.
  • In un caso specifico, gli utenti degli SDK Java Apache Beam 2.9.0 e versioni precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.7.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Funzionalità ritirata a partire dal 3 ottobre 2019.

Problemi noti:
  • Le pipeline potrebbero bloccarsi a causa di un problema con la libreria Conscrypt. Se in Stackdriver Logging vengono visualizzati errori con tracce di stack che includono chiamate correlate a Conscrypt, potresti essere interessato da questo problema. Per risolvere il problema, esegui l'upgrade all'SDK 2.9.0 o versioni successive.
  • In un caso specifico, gli utenti degli SDK Java Apache Beam 2.9.0 e versioni precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.6.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

È stata ritirata a partire dall'8 agosto 2019.

Problemi noti:
  • Le pipeline potrebbero bloccarsi a causa di un problema con la libreria Conscrypt. Se in Stackdriver Logging vengono visualizzati errori con tracce di stack che includono chiamate correlate a Conscrypt, potresti essere interessato da questo problema. Per risolvere il problema, esegui l'upgrade all'SDK 2.9.0 o versioni successive.
  • In un caso specifico, gli utenti degli SDK Java Apache Beam 2.9.0 e versioni precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.5.0 Ritirato org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

È stata ritirata il 6 giugno 2019.

Problemi noti:
  • Le pipeline potrebbero bloccarsi a causa di un problema con la libreria Conscrypt. Se in Stackdriver Logging vengono visualizzati errori con tracce di stack che includono chiamate correlate a Conscrypt, potresti essere interessato da questo problema. Per risolvere il problema, esegui l'upgrade all'SDK 2.9.0 o versioni successive.
  • In un caso specifico, gli utenti degli SDK Java Apache Beam 2.9.0 e versioni precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.4.0 Dismesso org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Ritiro dal servizio il 12 agosto 2020.

Questa versione è stata ritirata a causa della discontinuazione del supporto per gli endpoint JSON-RPC e HTTP batch globali.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Apache Beam 2.9.0 e versioni precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.3.0 Dismesso org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Ritiro dal servizio il 12 agosto 2020.

Questa versione è stata ritirata a causa della discontinuazione del supporto per gli endpoint JSON-RPC e HTTP batch globali.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Apache Beam 2.9.0 e versioni precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.2.0 Dismesso org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Ritiro dal servizio il 12 agosto 2020.

Questa versione è stata ritirata a causa della discontinuazione del supporto per gli endpoint JSON-RPC e HTTP batch globali.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Apache Beam 2.9.0 e versioni precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.1.0 Dismesso org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Ritiro dal servizio il 12 agosto 2020.

Questa versione è stata ritirata a causa della discontinuazione del supporto per gli endpoint JSON-RPC e HTTP batch globali.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Apache Beam 2.9.0 e versioni precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.0.0 Dismesso org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Ritiro dal servizio il 12 agosto 2020.

Questa versione è stata ritirata a causa della discontinuazione del supporto per gli endpoint JSON-RPC e HTTP batch globali.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Apache Beam 2.9.0 e versioni precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.

Python

Versione SDK Stato Componenti supportati Dettagli
2.61.0 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata il 25 novembre 2025.
2.60.0 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata il 17 ottobre 2025.
2.59.0 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata l'11 settembre 2025.
2.58.1 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata il 16 agosto 2025.

Problema noto: le pipeline che leggono i dati da Cloud Storage utilizzando GcsIO, direttamente o indirettamente, ad esempio con BigQueryIO, potrebbero riscontrare la corruzione dei dati nelle versioni dell'SDK Apache Beam per Python da 2.53.0 a 2.58.1. Per ulteriori informazioni, consulta il problema GitHub Apache Beam 32169.
2.58.0 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata il 6 agosto 2025.

Problema noto: le pipeline che leggono i dati da Cloud Storage utilizzando GcsIO, direttamente o indirettamente, ad esempio con BigQueryIO, potrebbero riscontrare la corruzione dei dati nelle versioni dell'SDK Apache Beam per Python da 2.53.0 a 2.58.1. Per ulteriori informazioni, consulta il problema GitHub Apache Beam 32169.
2.57.0 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata il 26 giugno 2025.

Problema noto: le pipeline che leggono i dati da Cloud Storage utilizzando GcsIO, direttamente o indirettamente, ad esempio con BigQueryIO, potrebbero riscontrare la corruzione dei dati nelle versioni dell'SDK Apache Beam per Python da 2.53.0 a 2.58.1. Per ulteriori informazioni, consulta il problema GitHub Apache Beam 32169.
2.56.0 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata il 1° maggio 2025.

Problema noto: le pipeline che leggono i dati da Cloud Storage utilizzando GcsIO, direttamente o indirettamente, ad esempio con BigQueryIO, potrebbero riscontrare la corruzione dei dati nelle versioni dell'SDK Apache Beam per Python da 2.53.0 a 2.58.1. Per ulteriori informazioni, consulta il problema GitHub Apache Beam 32169.
2.55.1 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata l'8 aprile 2025.

Problema noto:le pipeline Python che utilizzano questo SDK potrebbero bloccarsi occasionalmente. Per maggiori informazioni, consulta il problema GitHub Apache Beam 30867.

Problema noto: le pipeline che leggono i dati da Cloud Storage utilizzando GcsIO, direttamente o indirettamente, ad esempio con BigQueryIO, potrebbero riscontrare la corruzione dei dati nelle versioni dell'SDK Apache Beam per Python da 2.53.0 a 2.58.1. Per ulteriori informazioni, consulta il problema GitHub Apache Beam 32169.
2.55.0 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata il 25 marzo 2025.

Problema noto: la trasformazione WriteToJson nelle pipeline tra lingue non va a buon fine a causa di un errore. Per risolvere il problema, esegui l'upgrade ad Apache Beam 2.55.1. Per ulteriori informazioni, consulta Issue #30776: Beam YAML WriteToJson fails.

Problema noto:le pipeline Python che utilizzano questo SDK potrebbero bloccarsi occasionalmente. Per maggiori informazioni, consulta il problema GitHub Apache Beam 30867.

Problema noto: le pipeline che leggono i dati da Cloud Storage utilizzando GcsIO, direttamente o indirettamente, ad esempio con BigQueryIO, potrebbero riscontrare la corruzione dei dati nelle versioni dell'SDK Apache Beam per Python da 2.53.0 a 2.58.1. Per ulteriori informazioni, consulta il problema GitHub Apache Beam 32169.
2.54.0 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata il 14 febbraio 2025.

Problema noto: le pipeline che leggono i dati da Cloud Storage utilizzando GcsIO, direttamente o indirettamente, ad esempio con BigQueryIO, potrebbero riscontrare la corruzione dei dati nelle versioni dell'SDK Apache Beam per Python da 2.53.0 a 2.58.1. Per ulteriori informazioni, consulta il problema GitHub Apache Beam 32169.
2.53.0 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata il 4 gennaio 2025.

Problema noto: le pipeline che leggono i dati da Cloud Storage utilizzando GcsIO, direttamente o indirettamente, ad esempio con BigQueryIO, potrebbero riscontrare la corruzione dei dati nelle versioni dell'SDK Apache Beam per Python da 2.53.0 a 2.58.1. Per ulteriori informazioni, consulta il problema GitHub Apache Beam 32169.
2.52.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritiro previsto per il 17 novembre 2024.
2.51.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritirata il 12 ottobre 2024.
2.50.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritiro previsto per il 30 agosto 2024.
2.49.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritirata il 17 luglio 2024.
2.48.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritiro previsto per il 31 maggio 2024.
2.47.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritiro previsto per il 10 maggio 2024.
2.46.0 Supportato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Questa versione verrà ritirata il 10 marzo 2025. Il periodo di assistenza per questa versione è stato esteso a causa di problemi noti rilevati nelle release successive.
2.45.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritirata il 15 febbraio 2024.
2.44.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Non sarà più disponibile a partire dal 13 gennaio 2024.
2.43.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritirata il 17 novembre 2023.
2.42.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritirata il 17 ottobre 2023.
2.41.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritirata il 23 agosto 2023.
2.40.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, ml.inference (esclusi PytorchModelHandlerKeyedTensor e SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Non sarà più disponibile a partire dal 27 giugno 2023.
2.39.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Sarà deprecato il 25 maggio 2023.
2.38.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritirata il 20 aprile 2023.
2.37.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritirata il 4 marzo 2023.

Problemi noti:
  • Quando utilizzi WriteToBigQuery con il parametro ignore_unknown_columns impostato su true, il valore parametro viene ignorato. Questo problema è stato risolto nella versione 2.38.0. Per informazioni dettagliate, consulta BEAM-14039.
2.36.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Ritirata il 7 febbraio 2023.

Problemi noti:
  • Quando utilizzi WriteToBigQuery con il parametro ignore_unknown_columns impostato su true, il valore parametro viene ignorato. Questo problema è stato risolto nella versione 2.38.0. Per informazioni dettagliate, consulta BEAM-14039.
2.35.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub
I connettori in apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Sarà deprecato il 29 dicembre 2022.
2.34.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Ritirata l'11 novembre 2022.
2.33.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Ritirata il 7 ottobre 2022.
2.32.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Ritirato il 25 agosto 2022.
2.31.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Ritirata l'8 luglio 2022.
2.30.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Ritirato il 10 giugno 2022.
2.29.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Ritirata il 29 aprile 2022.
2.28.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Ritirata il 22 febbraio 2022.
2.27.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

È stato ritirato il 7 gennaio 2022.
2.26.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Ritiro previsto per l'11 dicembre 2021.
2.25.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Ritirata il 23 ottobre 2021.
2.24.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Non più supportato dal 18 settembre 2021. Inoltre, la versione 2.24.0 dell'SDK Apache Beam è l'ultima a supportare Python 2 e Python 3.5.

Dataflow non supporta più le pipeline che utilizzano Python 2. Scopri di più nella pagina relativa al supporto di Python 2 su Google Cloud.
2.23.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Ritirata il 29 luglio 2021.

Dataflow non supporta più le pipeline che utilizzano Python 2. Scopri di più nella pagina relativa al supporto di Python 2 su Google Cloud.
2.22.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp: bigquery, datastore, pubsub

Non più supportato dall'8 giugno 2021.

Dataflow non supporta più le pipeline che utilizzano Python 2. Scopri di più nella pagina relativa al supporto di Python 2 su Google Cloud.
2.21.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp

Ritirata il 27 maggio 2021.

Dataflow non supporta più le pipeline che utilizzano Python 2. Scopri di più nella pagina relativa al supporto di Python 2 su Google Cloud.
2.20.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp

Ritiro previsto per il 15 aprile 2021.

Dataflow non supporta più le pipeline che utilizzano Python 2. Scopri di più nella pagina relativa al supporto di Python 2 su Google Cloud.
2.19.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp

Ritiro previsto per il 4 febbraio 2021.

Dataflow non supporta più le pipeline che utilizzano Python 2. Scopri di più nella pagina relativa al supporto di Python 2 su Google Cloud.
2.18.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp

Ritirata il 23 gennaio 2021.

Dataflow non supporta più le pipeline che utilizzano Python 2. Scopri di più nella pagina relativa al supporto di Python 2 su Google Cloud.
2.17.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp

È stato ritirato il 6 gennaio 2021.

Dataflow non supporta più le pipeline che utilizzano Python 2. Scopri di più nella pagina relativa al supporto di Python 2 su Google Cloud.
2.16.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp
 Ritirato il 7 ottobre 2020.
2.15.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp
 Ritirato il 23 agosto 2020.
2.14.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp

Ritiro previsto per il 1° agosto 2020.

Problemi noti:
  • L'origine MongoDB aggiunta in questa release presenta un problema noto che può provocare la perdita di dati. Per informazioni dettagliate, consulta BEAM-7866.
2.13.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp
 Ritirata il 6 giugno 2020.
2.12.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp
 Ritirata a partire dal 25 aprile 2020.
2.11.0 Ritirato Libreria SDK Python di base nel modulo apache_beam: sottomoduli coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Origini e destinazioni basate su file e moduli correlati nel modulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Connettori I/O di Google Cloud nel modulo apache_beam.io.gcp
 Ritirata a partire dal 1° marzo 2020.
2.10.0 Ritirato Ritirata a partire dall'11 febbraio 2020.
2.9.0 Ritirato Funzionalità ritirata a partire dal 13 dicembre 2019.
2.8.0 Ritirato È stata ritirata il 25 ottobre 2019.
2.7.0 Ritirato

Funzionalità ritirata a partire dal 3 ottobre 2019.
2.6.0 Ritirato È stata ritirata a partire dall'8 agosto 2019.
2.5.0 Ritirato È stata ritirata il 6 giugno 2019.
2.4.0 Ritirato Ritiro previsto per il 20 marzo 2019.
2.3.0 Ritirato Ritiro previsto per il 30 gennaio 2019.
2.2.0 Ritirato Funzionalità ritirata a partire dal 2 dicembre 2018.
2.1.1
2.1.0		 Ritirato Funzionalità ritirata a partire dal 23 agosto 2018.
2.0.0 Ritirato Funzionalità ritirata a partire dal 17 maggio 2018.

Vai

Versione SDK Stato Componenti supportati Dettagli
2.61.0 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata il 25 novembre 2025.
2.60.0 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata il 17 ottobre 2025.
2.59.0 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata l'11 settembre 2025.
2.58.1 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata il 16 agosto 2025.
2.58.0 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata il 6 agosto 2025.
2.57.0 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata il 26 giugno 2025.
2.56.0 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata il 1° maggio 2025.
2.55.1 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata l'8 aprile 2025.
2.55.0 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata il 25 marzo 2025.
2.54.0 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata il 14 febbraio 2025.
2.53.0 Supportato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Questa versione verrà ritirata il 4 gennaio 2025.
2.52.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritiro previsto per il 17 novembre 2024.
2.51.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritirata il 12 ottobre 2024.
2.50.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritiro previsto per il 30 agosto 2024.
2.49.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritirata il 17 luglio 2024.
2.48.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritiro previsto per il 31 maggio 2024.
2.47.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritiro previsto per il 10 maggio 2024.
2.46.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritiro previsto per il 10 marzo 2024.
2.45.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritirata il 15 febbraio 2024.
2.44.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Non sarà più disponibile a partire dal 13 gennaio 2024.
2.43.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritirata il 17 novembre 2023.
2.42.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritirata il 17 ottobre 2023.
2.41.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritirata il 23 agosto 2023.
2.40.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Non sarà più disponibile a partire dal 27 giugno 2023.
2.39.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/xlang
 Sarà deprecato il 25 maggio 2023.
2.38.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Ritirata il 20 aprile 2023.
2.37.0 Ritirato Pacchetti nelle seguenti directory:
- Pacchetto SDK Go di Beam Core
- beam/transforms
- beam/io/textio
- beam/io/xlang
 Ritirata il 4 marzo 2023.

SDK Dataflow 2.x

Le seguenti tabelle contengono lo stato del supporto per gli SDK Dataflow 2.x, inclusi l'SDK Dataflow Java e l'SDK Dataflow Python:

Java

Per informazioni sulle modifiche, consulta le note di rilascio dell'SDK Dataflow 2.x per Java.

Versione SDK Stato Dettagli
2.5.0 Ritirato

È stata ritirata il 6 giugno 2019.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Dataflow 2.5.0 e precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.4.0 Dismesso

Ritiro dal servizio il 12 agosto 2020.

Questa versione è stata ritirata a causa della discontinuazione del supporto per gli endpoint JSON-RPC e HTTP batch globali.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Dataflow 2.5.0 e precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.3.0 Dismesso

Ritiro dal servizio il 12 agosto 2020.

Questa versione è stata ritirata a causa della discontinuazione del supporto per gli endpoint JSON-RPC e HTTP batch globali.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Dataflow 2.5.0 e precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.2.0 Dismesso

Ritiro dal servizio il 12 agosto 2020.

Questa versione è stata ritirata a causa della discontinuazione del supporto per gli endpoint JSON-RPC e HTTP batch globali.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Dataflow 2.5.0 e precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.1.0 Dismesso

Ritiro dal servizio il 12 agosto 2020.

Questa versione è stata ritirata a causa della discontinuazione del supporto per gli endpoint JSON-RPC e HTTP batch globali.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Dataflow 2.5.0 e precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.0.0 Dismesso

Ritiro dal servizio il 12 agosto 2020.

Questa versione è stata ritirata a causa della discontinuazione del supporto per gli endpoint JSON-RPC e HTTP batch globali.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Dataflow 2.5.0 e precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.
2.0.0-beta3
2.0.0-beta2
2.0.0-beta1
 Dismesso

Ritiro dal servizio a partire dal 28 febbraio 2018.

Problema noto:
  • In un caso specifico, gli utenti degli SDK Java Dataflow 2.5.0 e precedenti potrebbero riscontrare la duplicazione dei dati durante la lettura dei file da Cloud Storage. La duplicazione potrebbe verificarsi quando tutte le seguenti condizioni sono vere:
    • Stai leggendo file con l'attributo content-encoding impostato su gzip e i file vengono transcodificati in modo decompressivo dinamico da Cloud Storage.
    • La dimensione del file (decompresso) è superiore a 2,14 GB.
    • Lo stream di input rileva un errore (e viene ricreato) dopo la lettura di 2,14 GB.
    Come soluzione alternativa, non impostare l'intestazione content-encoding e archivia i file compressi in Cloud Storage con l'estensione corretta (ad esempio gz per gzip). Per i file esistenti, puoi aggiornare l'intestazione content-encoding e il nome file con i comandi gcloud storage.

Python

Per informazioni sulle modifiche, consulta le note di rilascio dell'SDK 2.x di Dataflow per Python.

Versione SDK Stato Dettagli
2.5.0 Ritirato È stata ritirata il 6 giugno 2019.
2.4.0 Ritirato Ritiro previsto per il 20 marzo 2019.
2.3.0 Ritirato Ritiro previsto per il 30 gennaio 2019.
2.2.0 Ritirato Funzionalità ritirata a partire dal 2 dicembre 2018.
2.1.1 Ritirato Funzionalità ritirata a partire dal 23 agosto 2018.
Risolve un problema di compatibilità con il pacchetto Python six.
Per saperne di più, consulta le note di rilascio.
2.1.0 Ritirato Funzionalità ritirata a partire dal 23 agosto 2018.
Questa release presenta un problema di compatibilità con il pacchetto Python six 1.11.0.
Per saperne di più, consulta le note di rilascio.
2.0.0 Ritirato Funzionalità ritirata a partire dal 17 maggio 2018.
Questa release presenta un problema di compatibilità con il pacchetto Python six 1.11.0.
Per saperne di più, consulta le note di rilascio.
0.6.0
0.5.5
0.5.1
0.4.4
0.4.3
0.4.2
0.4.1
0.4.0
 Dismesso Ritiro dal servizio dal 29 gennaio 2018.
0.2.7 e versioni precedenti Dismesso Dismessa a partire dal 23 marzo 2017.