Estado de asistencia de la versión del SDK

Esta página enumera el estado de compatibilidad de Dataflow para el SDK de Apache Beam y las versiones del SDK de Dataflow:

Definiciones de nivel de asistencia del SDK de Apache Beam

Los siguientes son los niveles de compatibilidad de Dataflow para el SDK de Apache Beam:

  • Compatible: Dataflow admite las versiones del SDK de Apache Beam desde su fecha de lanzamiento hasta su fecha de baja.
  • Obsoleto: Cuando una versión del SDK está obsoleta, continúa funcionando con Dataflow, pero puede que se retire en el futuro. Antes de que una versión del SDK se retire, los clientes reciben una notificación y tienen tiempo para actualizar sus entornos. Las solicitudes de trabajos enviados desde versiones obsoletas del SDK generan un mensaje de advertencia. Se recomienda actualizar los entornos que usen una versión obsoleta de un SDK a una versión compatible, pero las versiones obsoletas del SDK seguirán funcionando con Dataflow.
  • Retirado: Las versiones del SDK que se retiraron de servicio ya no funcionan con Dataflow. Las solicitudes de trabajos enviados desde versiones del SDK fuera de servicio generan un error. Para usar el SDK con Dataflow, debes actualizar el entorno a una versión del SDK que no esté retirada. Se recomienda actualizar el SDK a una versión compatible. Las versiones del SDK rara vez se retiran. Antes de que una versión del SDK se retire, los clientes reciben una notificación y tienen tiempo para actualizar sus entornos.

Las definiciones anteriores no se aplican a los SDK ni a las funciones que nunca se han admitido.

SDK 2.x de Apache Beam

Apache Beam es un proyecto de código abierto dirigido por la comunidad. Google y Google Cloud forman parte de la comunidad de Apache Beam, pero no somos dueños del proyecto ni controlamos el proceso de actualización. Podemos informar errores o enviar parches a la base de código de Apache Beam en nombre de los clientes de Dataflow. No podemos crear revisiones o actualizaciones oficiales de Apache Beam según demanda. Consulta la página de las políticas de Apache Beam para obtener más información de las políticas de actualizaciones.

Dataflow admite componentes específicos del SDK de Apache Beam para las actualizaciones del SDK que se enumeran en esta página. Estos componentes se probaron de forma exhaustiva con Dataflow. No se admiten las funciones experimentales.

Consulta las notas de la versión de Apache Beam para cambiar la información.

Las siguientes tablas contienen el estado de compatibilidad de los SDK 2.x de Apache Beam, incluidos el SDK de Python de Apache Beam, el SDK de Java de Apache Beam y el SDK de Go de Apache Beam:

Java

Versión del SDK Estado Componentes compatibles Detalles
2.59.0 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Esta versión quedará obsoleta a partir del 11 de septiembre de 2025.
2.58.1 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Esta versión quedará obsoleta a partir del 16 de agosto de 2025.
2.58.0 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Esta versión quedará obsoleta a partir del 6 de agosto de 2025.
2.57.0 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Esta versión quedará obsoleta el 26 de junio de 2025.
2.56.0 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
 Esta versión quedará obsoleta el 1 de mayo de 2025.
2.55.1 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores E/S de Google Cloud bajo el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Esta versión quedará obsoleta a partir del 8 de abril de 2025.
2.55.0 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores E/S de Google Cloud bajo el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql

Esta versión quedará obsoleta el 25 de marzo de 2025.

Problema conocido: La transformación WriteToJson en las canalizaciones de varios lenguajes falla con un error. Para resolver este problema, actualiza a Apache Beam 2.55.1. Para obtener más información, consulta el problema #30776: Beam YAML WriteToJson falla.
2.54.0 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de Google Cloud I/O en los módulos org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Esta versión quedará obsoleta a partir del 14 de febrero de 2025.
2.53.0 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de Google Cloud I/O en los módulos org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Esta versión dejará de estar disponible a partir del 4 de enero de 2025
2.52.0 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de Google Cloud I/O en los módulos org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Esta versión quedará obsoleta el 17 de noviembre de 2024.
2.51.0 Admitido org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de Google Cloud I/O en los módulos org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Esta versión quedará obsoleta a partir del 12 de octubre de 2024.
2.50.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleta a partir del 30 de agosto de 2024.
2.49.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleta a partir del 17 de julio de 2024.
2.48.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleto a partir del 31 de mayo de 2024.
2.47.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleto a partir del 10 de mayo de 2024.
2.46.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleta a partir del 10 de marzo de 2024.
2.45.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleto a partir del 15 de febrero de 2024.
2.44.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleto a partir del 13 de enero de 2024.
2.43.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleto a partir del 17 de noviembre de 2023.
2.42.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleta a partir del 17 de octubre de 2023.
2.41.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleta a partir del 23 de agosto de 2023.
2.40.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleto a partir del 27 de junio de 2023.
2.39.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleto a partir del 25 de mayo de 2023.
2.38.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleta a partir del 20 de abril de 2023.
2.37.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleta a partir del 4 de marzo de 2023.
2.36.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de Google Cloud I/O en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleto a partir del 7 de febrero de 2023.
2.35.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de Google Cloud I/O en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleto a partir del 29 de diciembre de 2022.
2.34.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
 Obsoleto a partir del 11 de noviembre de 2022.
2.33.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
 Obsoleto a partir del 7 de octubre de 2022.
2.32.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
 Obsoleta a partir del 25 de agosto de 2022.
2.31.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
 Obsoleta a partir del 8 de julio de 2022.
2.30.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
 Obsoleto a partir del 10 de junio de 2022.
2.29.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 29 de abril de 2022.

Problema conocido: Si usas Runner V2, de forma predeterminada, Dataflow usará un contenedor del SDK de Java 8 sin importar la versión de Java del usuario. Para solucionar problemas de Java 11, puedes anular la imagen predeterminada del SDK si proporcionas la opción de canalización --worker_harness_container_image=gcr.io/cloud-dataflow/v1beta3/beam_java11_sdk:2.29.0` ConsultaHerramienta de seguimiento de errores de Apache Beam para obtener más información.

2.28.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleto a partir del 22 de febrero de 2022.
2.27.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleto a partir del 7 de enero de 2022.

Esta versión incluye compatibilidad para JDK 11.
2.26.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleto a partir del 11 de diciembre de 2021.
2.25.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleto a partir del 23 de octubre de 2021.
2.24.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 18 de septiembre de 2021.

Problema conocido: Si usas temporizadores que se restablecen, en lugar de temporizadores establecidos y que solo se activan una vez, no debes actualizar a 2.24.0. Cuando se activa un temporizador, pero se restablece antes de que se ejecute, se puede filtrar una conservación de marca de agua, lo que hará que se atasque el trabajo de canalización. Consulta la herramienta de seguimiento de errores de Apache Beam para obtener más información.
2.23.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 29 de julio de 2021.
2.22.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Conectores de E/S de Google Cloud en el módulo org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleto a partir del 8 de junio de 2021.
2.21.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleto a partir del 27 de mayo de 2021.
2.20.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 15 de abril de 2021.
2.19.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleto a partir del 4 de febrero de 2021.
2.18.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleto a partir del 23 de enero de 2021.
2.17.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleto a partir del 6 de enero de 2021.
2.16.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 7 de octubre de 2020.
2.15.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 23 de agosto de 2020.

Problemas conocidos:
  • Los usuarios de Dataflow que usan características de esquema (incluidas las transformaciones de SQL) no deberían actualizar a la versión 2.15.0 debido a un problema conocido. Consulta la herramienta de seguimiento de errores de Apache Beam para obtener más información.
2.14.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 1 de agosto de 2020.
2.13.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleto a partir del 6 de junio de 2020.

Esta versión incluye compatibilidad experimental para JDK 9 y versiones posteriores. Consulta la herramienta de seguimiento de errores de Apache Beam para obtener más información.
2.12.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 25 de abril de 2020.

Problemas conocidos:
  • El ejecutor de Dataflow tiene una configuración de registro incorrecta que puede causar la pérdida de todos los registros. Para solucionar este problema, agrega slf4j-jdk14 a tus dependencias de entorno de ejecución.
2.11.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 1 de marzo de 2020.

Problemas conocidos:
  • El ejecutor de Dataflow tiene una configuración de registro incorrecta que puede causar la pérdida de todos los registros. Para solucionar este problema, agrega slf4j-jdk14 a tus dependencias de entorno de ejecución.
2.10.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 11 de febrero de 2020.

Problemas conocidos:
  • El SDK 2.10.0 depende de la biblioteca cliente de gcsio versión 1.9.13, que tiene problemas conocidos:
    • La lectura de entradas laterales puede provocar el envío de muchas solicitudes a Cloud Storage. Como resultado, los trabajos de Dataflow pueden fallar con errores HTTP 429 de Cloud Storage.
    • Apache Beam ParquetIO falla al leer archivos desde Cloud Storage.

    Para solucionar estos problemas, actualiza el SDK a la versión 2.11.0 o anula la versión de la biblioteca cliente de gcsio a 1.9.16 o posterior.

  • El ejecutor de Dataflow tiene una configuración de registro incorrecta que puede causar la pérdida de todos los registros. Para solucionar este problema, agrega slf4j-jdk14 a tus dependencias de entorno de ejecución.
2.9.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 13 de diciembre de 2019.

Problemas conocidos:
  • Si habilitas el experimento de Streaming Engine (Beta), no actualices a la versión 2.9.0 del SDK debido a un problema conocido. Si eliges usar SDK 2.9.0, también debes establecer el indicador experimental enable_conscrypt_security_provider para habilitar Conscrypt, que tiene problemas de estabilidad conocidos.
  • En un caso específico, los usuarios del SDK de Apache Beam Java 2.9.0 y versiones anteriores pueden experimentar duplicación de datos al leer archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.8.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 25 de octubre de 2019.

Problemas conocidos:
  • Las canalizaciones podrían atascarse debido a un problema con la biblioteca de Conscrypt. Si observas errores en Stackdriver Logging con seguimientos de pila que incluyen llamadas relacionadas, es posible que tengas este problema. Para resolver el problema, actualiza a SDK 2.9.0 o superior.
  • En un caso específico, los usuarios del SDK de Apache Beam Java 2.9.0 y versiones anteriores pueden experimentar duplicación de datos al leer archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.7.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 3 de octubre de 2019.

Problemas conocidos:
  • Las canalizaciones podrían atascarse debido a un problema con la biblioteca de Conscrypt. Si observas errores en Stackdriver Logging con seguimientos de pila que incluyen llamadas relacionadas, es posible que tengas este problema. Para resolver el problema, actualiza a SDK 2.9.0 o superior.
  • En un caso específico, los usuarios del SDK de Apache Beam Java 2.9.0 y versiones anteriores pueden experimentar duplicación de datos al leer archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.6.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 8 de agosto de 2019.

Problemas conocidos:
  • Las canalizaciones podrían atascarse debido a un problema con la biblioteca de Conscrypt. Si observas errores en Stackdriver Logging con seguimientos de pila que incluyen llamadas relacionadas, es posible que tengas este problema. Para resolver el problema, actualiza a SDK 2.9.0 o superior.
  • En un caso específico, los usuarios del SDK de Apache Beam Java 2.9.0 y versiones anteriores pueden experimentar duplicación de datos al leer archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.5.0 Obsoleto org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Obsoleta a partir del 6 de junio de 2019.

Problemas conocidos:
  • Las canalizaciones podrían atascarse debido a un problema con la biblioteca de Conscrypt. Si observas errores en Stackdriver Logging con seguimientos de pila que incluyen llamadas relacionadas, es posible que tengas este problema. Para resolver el problema, actualiza a SDK 2.9.0 o superior.
  • En un caso específico, los usuarios del SDK de Apache Beam Java 2.9.0 y versiones anteriores pueden experimentar duplicación de datos al leer archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.4.0 Fuera de servicio org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Fuera de servicio a partir del 12 de agosto de 2020.

Esta versión se retiró debido a la suspensión de la compatibilidad con JSON-RPC y los extremos globales de lotes HTTP.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Apache Beam Java 2.9.0 y versiones anteriores pueden experimentar duplicación de datos al leer archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.3.0 Fuera de servicio org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Fuera de servicio a partir del 12 de agosto de 2020.

Esta versión se retiró debido a la suspensión de la compatibilidad con JSON-RPC y los extremos globales de lotes HTTP.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Apache Beam Java 2.9.0 y versiones anteriores pueden experimentar duplicación de datos al leer archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.2.0 Fuera de servicio org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Fuera de servicio a partir del 12 de agosto de 2020.

Esta versión se retiró debido a la suspensión de la compatibilidad con JSON-RPC y los extremos globales de lotes HTTP.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Apache Beam Java 2.9.0 y versiones anteriores pueden experimentar duplicación de datos al leer archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.1.0 Fuera de servicio org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Fuera de servicio a partir del 12 de agosto de 2020.

Esta versión se retiró debido a la suspensión de la compatibilidad con JSON-RPC y los extremos globales de lotes HTTP.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Apache Beam Java 2.9.0 y versiones anteriores pueden experimentar duplicación de datos al leer archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.0.0 Fuera de servicio org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Fuera de servicio a partir del 12 de agosto de 2020.

Esta versión se retiró debido a la suspensión de la compatibilidad con JSON-RPC y los extremos globales de lotes HTTP.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Apache Beam Java 2.9.0 y versiones anteriores pueden experimentar duplicación de datos al leer archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.

Python

Versión del SDK Estado Componentes compatibles Detalles
2.59.0 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql, yaml
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta a partir del 11 de septiembre de 2025.
2.58.1 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql, yaml
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta a partir del 16 de agosto de 2025.

Problema conocido: Es posible que las canalizaciones que leen datos de Cloud Storage con GcsIO, ya sea de forma directa o indirecta, como con BigQueryIO, experimenten daños en los datos en las versiones del SDK de Apache Beam para Python 2.53.0 a 2.58.1. Para obtener más información, consulta el problema n.º 32169 de Apache Beam en GitHub.
2.58.0 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql, yaml
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta a partir del 6 de agosto de 2025.

Problema conocido: Es posible que las canalizaciones que leen datos de Cloud Storage con GcsIO, ya sea de forma directa o indirecta, como con BigQueryIO, experimenten daños en los datos en las versiones del SDK de Apache Beam para Python 2.53.0 a 2.58.1. Para obtener más información, consulta el problema n.º 32169 de Apache Beam en GitHub.
2.57.0 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql, yaml
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta el 26 de junio de 2025.

Problema conocido: Es posible que las canalizaciones que leen datos de Cloud Storage con GcsIO, ya sea de forma directa o indirecta, como con BigQueryIO, experimenten daños en los datos en las versiones del SDK de Apache Beam para Python 2.53.0 a 2.58.1. Para obtener más información, consulta el problema n.º 32169 de Apache Beam en GitHub.
2.56.0 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql, yaml
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta el 1 de mayo de 2025.

Problema conocido: Es posible que las canalizaciones que leen datos de Cloud Storage con GcsIO, ya sea de forma directa o indirecta, como con BigQueryIO, experimenten daños en los datos en las versiones del SDK de Apache Beam para Python 2.53.0 a 2.58.1. Para obtener más información, consulta el problema n.º 32169 de Apache Beam en GitHub.
2.55.1 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql, yaml
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta a partir del 8 de abril de 2025.

Problema conocido: Las canalizaciones de Python que usan este SDK pueden experimentar atascados ocasionales. Para obtener más información, consulta el problema nº 30867 de Apache Beam en GitHub.

Problema conocido: Es posible que las canalizaciones que leen datos de Cloud Storage con GcsIO, ya sea de forma directa o indirecta, como con BigQueryIO, experimenten daños en los datos en las versiones del SDK de Apache Beam para Python 2.53.0 a 2.58.1. Para obtener más información, consulta el problema n.º 32169 de Apache Beam en GitHub.
2.55.0 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql, yaml
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta el 25 de marzo de 2025.

Problema conocido: La transformación WriteToJson en las canalizaciones de varios lenguajes falla con un error. Para resolver este problema, actualiza a Apache Beam 2.55.1. Para obtener más información, consulta el problema #30776: Beam YAML WriteToJson falla.

Problema conocido: Las canalizaciones de Python que usan este SDK pueden experimentar atascados ocasionales. Para obtener más información, consulta el problema nº 30867 de Apache Beam en GitHub.

Problema conocido: Es posible que las canalizaciones que leen datos de Cloud Storage con GcsIO, ya sea de forma directa o indirecta, como con BigQueryIO, experimenten daños en los datos en las versiones del SDK de Apache Beam para Python 2.53.0 a 2.58.1. Para obtener más información, consulta el problema n.º 32169 de Apache Beam en GitHub.
2.54.0 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql, yaml
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta a partir del 14 de febrero de 2025.

Problema conocido: Es posible que las canalizaciones que leen datos de Cloud Storage con GcsIO, ya sea de forma directa o indirecta, como con BigQueryIO, experimenten daños en los datos en las versiones del SDK de Apache Beam para Python 2.53.0 a 2.58.1. Para obtener más información, consulta el problema n.º 32169 de Apache Beam en GitHub.
2.53.0 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión dejará de estar disponible a partir del 4 de enero de 2025

Problema conocido: Es posible que las canalizaciones que leen datos de Cloud Storage con GcsIO, ya sea de forma directa o indirecta, como con BigQueryIO, experimenten daños en los datos en las versiones del SDK de Apache Beam para Python 2.53.0 a 2.58.1. Para obtener más información, consulta el problema n.º 32169 de Apache Beam en GitHub.
2.52.0 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta el 17 de noviembre de 2024.
2.51.0 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta a partir del 12 de octubre de 2024.
2.50.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleta a partir del 30 de agosto de 2024.
2.49.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleta a partir del 17 de julio de 2024.
2.48.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleto a partir del 31 de mayo de 2024.
2.47.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleto a partir del 10 de mayo de 2024.
2.46.0 Admitido Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Esta versión quedará obsoleta el 10 de marzo de 2025. Se extendió el período de asistencia para esta versión debido a problemas conocidos que se descubrieron en versiones posteriores.
2.45.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleto a partir del 15 de febrero de 2024.
2.44.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleto a partir del 13 de enero de 2024.
2.43.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleto a partir del 17 de noviembre de 2023.
2.42.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleta a partir del 17 de octubre de 2023.
2.41.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleta a partir del 23 de agosto de 2023.
2.40.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, ml.inference (excluidos PytorchModelHandlerKeyedTensor y SklearnModelHandlerPandas), opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleto a partir del 27 de junio de 2023.
2.39.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleto a partir del 25 de mayo de 2023.
2.38.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleta a partir del 20 de abril de 2023.
2.37.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleta a partir del 4 de marzo de 2023.

Problemas conocidos:
  • Cuando usas WriteToBigQuery con el parámetro ignore_unknown_columns configurado como true, el valor del parámetro se ignora. Este problema se corrigió en la versión 2.38.0. Consulta BEAM-14039 para obtener más información.
2.36.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleto a partir del 7 de febrero de 2023.

Problemas conocidos:
  • Cuando usas WriteToBigQuery con el parámetro ignore_unknown_columns configurado como true, el valor del parámetro se ignora. Este problema se corrigió en la versión 2.38.0. Consulta BEAM-14039 para obtener más información.
2.35.0 Obsoleto Biblioteca principal del SDK de Python en el módulo apache_beam: codificadores de submódulos, dataframe, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, typehints, sql
Basados en archivos fuentes y receptores, y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, sistemas de archivos, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub
Los conectores de apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Obsoleto a partir del 29 de diciembre de 2022.
2.34.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, marco de datos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos, sq
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleto a partir del 11 de noviembre de 2022.
2.33.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, marco de datos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleto a partir del 7 de octubre de 2022.
2.32.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, marco de datos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, fileio
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleta a partir del 25 de agosto de 2022.
2.31.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, marco de datos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleta a partir del 8 de julio de 2022.
2.30.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, marco de datos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleto a partir del 10 de junio de 2022.
2.29.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, marco de datos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleta a partir del 29 de abril de 2022.
2.28.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, marco de datos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleto a partir del 22 de febrero de 2022.
2.27.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, marco de datos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleto a partir del 7 de enero de 2022.
2.26.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, marco de datos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleto a partir del 11 de diciembre de 2021.
2.25.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleto a partir del 23 de octubre de 2021.
2.24.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleta a partir del 18 de septiembre de 2021. Además, la versión 2.24.0 del SDK de Apache Beam es la última compatible con Python 2 y Python 3.5.

Dataflow ya no admite canalizaciones que usan Python 2. Obtén más información en la página Compatibilidad con Python 2 en Google Cloud.
2.23.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleta a partir del 29 de julio de 2021.

Dataflow ya no admite canalizaciones que usan Python 2. Obtén más información en la página Compatibilidad con Python 2 en Google Cloud.
2.22.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp: bigquery, datastore, pubsub

Obsoleto a partir del 8 de junio de 2021.

Dataflow ya no admite canalizaciones que usan Python 2. Obtén más información en la página Compatibilidad con Python 2 en Google Cloud.
2.21.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp

Obsoleto a partir del 27 de mayo de 2021.

Dataflow ya no admite canalizaciones que usan Python 2. Obtén más información en la página Compatibilidad con Python 2 en Google Cloud.
2.20.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp

Obsoleta a partir del 15 de abril de 2021.

Dataflow ya no admite canalizaciones que usan Python 2. Obtén más información en la página Compatibilidad con Python 2 en Google Cloud.
2.19.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp

Obsoleto a partir del 4 de febrero de 2021.

Dataflow ya no admite canalizaciones que usan Python 2. Obtén más información en la página Compatibilidad con Python 2 en Google Cloud.
2.18.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp

Obsoleto a partir del 23 de enero de 2021.

Dataflow ya no admite canalizaciones que usan Python 2. Obtén más información en la página Compatibilidad con Python 2 en Google Cloud.
2.17.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp

Obsoleto a partir del 6 de enero de 2021.

Dataflow ya no admite canalizaciones que usan Python 2. Obtén más información en la página Compatibilidad con Python 2 en Google Cloud.
2.16.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp
 Obsoleta a partir del 7 de octubre de 2020.
2.15.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp
 Obsoleta a partir del 23 de agosto de 2020.
2.14.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp

Obsoleta a partir del 1 de agosto de 2020.

Problemas conocidos:
  • La fuente MongoDB agregada a esta versión tiene un problema conocido que puede provocar la pérdida de datos. Consulta BEAM-7866 para obtener más información.
2.13.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp
 Obsoleta a partir del 6 de junio de 2020.
2.12.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp
 Obsoleta a partir del 25 de abril de 2020.
2.11.0 Obsoleto Biblioteca del SDK del núcleo de Python en el módulo apache_beam: codificadores de submódulos, métricas, opciones, portabilidad, runners.dataflow, runners.direct, transformaciones, indicaciones de tipos
Fuentes y receptores basados en archivos y módulos relacionados en el módulo apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Conectores de E/S de Google Cloud en el módulo apache_beam.io.gcp
 Obsoleta a partir del 1 de marzo de 2020.
2.10.0 Obsoleto Obsoleta a partir del 11 de febrero de 2020.
2.9.0 Obsoleto Obsoleta a partir del 13 de diciembre de 2019.
2.8.0 Obsoleto Obsoleta a partir del 25 de octubre de 2019.
2.7.0 Obsoleto

Obsoleta a partir del 3 de octubre de 2019.
2.6.0 Obsoleto Obsoleta a partir del 8 de agosto de 2019.
2.5.0 Obsoleto Obsoleta a partir del 6 de junio de 2019.
2.4.0 Obsoleto Obsoleta a partir del 20 de marzo de 2019.
2.3.0 Obsoleto Obsoleta a partir del 30 de enero de 2019.
2.2.0 Obsoleto Fuera de servicio a partir del 2 de diciembre de 2018.
2.1.1
2.1.0		 Obsoleto Fuera de servicio a partir del 23 de agosto de 2018.
2.0.0 Obsoleto Fuera de servicio a partir del 17 de mayo de 2018.

Go

Versión del SDK Estado Componentes compatibles Detalles
2.59.0 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión quedará obsoleta a partir del 11 de septiembre de 2025.
2.58.1 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión quedará obsoleta a partir del 16 de agosto de 2025.
2.58.0 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión quedará obsoleta a partir del 6 de agosto de 2025.
2.57.0 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión quedará obsoleta el 26 de junio de 2025.
2.56.0 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión quedará obsoleta el 1 de mayo de 2025.
2.55.1 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión quedará obsoleta a partir del 8 de abril de 2025.
2.55.0 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión quedará obsoleta el 25 de marzo de 2025.
2.54.0 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión quedará obsoleta a partir del 14 de febrero de 2025.
2.53.0 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión dejará de estar disponible a partir del 4 de enero de 2025
2.52.0 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión quedará obsoleta el 17 de noviembre de 2024.
2.51.0 Admitido Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Esta versión quedará obsoleta a partir del 12 de octubre de 2024.
2.50.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleta a partir del 30 de agosto de 2024.
2.49.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleta a partir del 17 de julio de 2024.
2.48.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleto a partir del 31 de mayo de 2024.
2.47.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleto a partir del 10 de mayo de 2024.
2.46.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleta a partir del 10 de marzo de 2024.
2.45.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleto a partir del 15 de febrero de 2024.
2.44.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleto a partir del 13 de enero de 2024.
2.43.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleto a partir del 17 de noviembre de 2023.
2.42.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleta a partir del 17 de octubre de 2023.
2.41.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleta a partir del 23 de agosto de 2023.
2.40.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleto a partir del 27 de junio de 2023.
2.39.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete del SDK de Core Beam central
- beam/transforms
- beam/io/textio
- beam/io/xlang
 Obsoleto a partir del 25 de mayo de 2023.
2.38.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
 Obsoleta a partir del 20 de abril de 2023.
2.37.0 Obsoleto Paquetes en los siguientes directorios:
- Paquete del SDK de Core Beam central
- beam/transforms
- beam/io/textio
- beam/io/xlang
 Obsoleta a partir del 4 de marzo de 2023.

SDK 2.x de Dataflow

Las siguientes tablas contienen el estado de compatibilidad de los SDK 2.x de Dataflow, incluidos el SDK de Dataflow para Java y el SDK de Dataflow para Python:

Java

Consulta las notas de la versión del SDK 2.x de Dataflow para Java si deseas obtener información de los cambios.

Versión del SDK Estado Detalles
2.5.0 Obsoleto

Obsoleta a partir del 6 de junio de 2019.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Dataflow Java 2.5.0 y versiones anteriores pueden experimentar una duplicación de datos cuando leen archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.4.0 Fuera de servicio

Fuera de servicio a partir del 12 de agosto de 2020.

Esta versión se retiró debido a la suspensión de la compatibilidad con JSON-RPC y los extremos globales de lotes HTTP.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Dataflow Java 2.5.0 y versiones anteriores pueden experimentar una duplicación de datos cuando leen archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.3.0 Fuera de servicio

Fuera de servicio a partir del 12 de agosto de 2020.

Esta versión se retiró debido a la suspensión de la compatibilidad con JSON-RPC y los extremos globales de lotes HTTP.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Dataflow Java 2.5.0 y versiones anteriores pueden experimentar una duplicación de datos cuando leen archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.2.0 Fuera de servicio

Fuera de servicio a partir del 12 de agosto de 2020.

Esta versión se retiró debido a la suspensión de la compatibilidad con JSON-RPC y los extremos globales de lotes HTTP.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Dataflow Java 2.5.0 y versiones anteriores pueden experimentar una duplicación de datos cuando leen archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.1.0 Fuera de servicio

Fuera de servicio a partir del 12 de agosto de 2020.

Esta versión se retiró debido a la suspensión de la compatibilidad con JSON-RPC y los extremos globales de lotes HTTP.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Dataflow Java 2.5.0 y versiones anteriores pueden experimentar una duplicación de datos cuando leen archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.0.0 Fuera de servicio

Fuera de servicio a partir del 12 de agosto de 2020.

Esta versión se retiró debido a la suspensión de la compatibilidad con JSON-RPC y los extremos globales de lotes HTTP.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Dataflow Java 2.5.0 y versiones anteriores pueden experimentar una duplicación de datos cuando leen archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.
2.0.0-beta3
2.0.0-beta2
2.0.0-beta1
 Fuera de servicio

Fuera de servicio a partir del 28 de febrero de 2018.

Problema conocido:
  • En un caso específico, los usuarios del SDK de Dataflow Java 2.5.0 y versiones anteriores pueden experimentar una duplicación de datos cuando leen archivos desde Cloud Storage. La duplicación puede ocurrir cuando se cumplen todas las condiciones siguientes:
    • Estás leyendo archivos con la codificación de contenido establecida en gzip, y los archivos son transcodificados descompresivos dinámicamente por Cloud Storage.
    • El tamaño del archivo (descomprimido) es superior a 2.14 GB.
    • La secuencia de entrada se encuentra con un error (y se vuelve a crear) después de leer 2.14 GB.
    Como solución alternativa, no establezcas el encabezado de codificación de contenido ni almacenes los archivos comprimidos en Cloud Storage con la extensión adecuada (por ejemplo, gz para gzip). Para los archivos existentes, puedes actualizar el encabezado de codificación de contenido y el nombre del archivo con los comandos gcloud storage.

Python

Consulta las notas de la versión del SDK 2.x de Dataflow para Python si deseas obtener información de los cambios.

Versión del SDK Estado Detalles
2.5.0 Obsoleto Obsoleta a partir del 6 de junio de 2019.
2.4.0 Obsoleto Obsoleta a partir del 20 de marzo de 2019.
2.3.0 Obsoleto Obsoleta a partir del 30 de enero de 2019.
2.2.0 Obsoleto Fuera de servicio a partir del 2 de diciembre de 2018.
2.1.1 Obsoleto Fuera de servicio a partir del 23 de agosto de 2018.
Corrige un problema de compatibilidad con el paquete six de Python.
Consulta las notas de la versión para obtener más información.
2.1.0 Obsoleto Fuera de servicio a partir del 23 de agosto de 2018.
Esta versión tiene un problema de compatibilidad con el paquete six 1.11.0 de Python.
Consulta las notas de versión para obtener más información.
2.0.0 Obsoleto Fuera de servicio a partir del 17 de mayo de 2018.
Esta versión tiene un problema de compatibilidad con el paquete six 1.11.0 de Python.
Consulta las notas de versión para obtener más información.
0.6.0
0.5.5
0.5.1
0.4.4
0.4.3
0.4.2
0.4.1
0.4.0
 Fuera de servicio Fuera de servicio a partir del 29 de enero de 2018.
0.2.7 y versiones anteriores Fuera de servicio Fuera de servicio a partir del 23 de marzo de 2017.