Dataflow SQL

Dataflow dejará de ser compatible con Dataflow SQL. Este es un cambio rotundo.

  • A partir del 31 de julio de 2024, no podrás acceder a Dataflow SQL en la consola de Google Cloud.
  • A partir del 31 de enero de 2025, no podrás usar Dataflow SQL en Google Cloud CLI.

Reemplazo: Beam SQL

Beam SQL te permite consultar PCollections delimitadas y no delimitadas con instrucciones de SQL Si trabajas en un notebook de Apache Beam, puedes usar las funciones mágicas personalizadas de IPython beam_sql para acelerar el desarrollo de tu canalización.

Beam SQL proporciona una funcionalidad similar a Dataflow SQL, con instrucciones de SQL para consultar PCollections.

Migración

Te recomendamos que comiences a migrar tu consulta de Dataflow SQL a Beam SQL lo antes posible.

Pasar a Beam SQL es un cambio rotundo que afecta a cualquier trabajo o consulta de Dataflow SQL. Deberás volver a compilar trabajos y consultas.

Con este cambio, no podrás crear trabajos de Dataflow SQL nuevos. Sin embargo, este cambio no afecta a los trabajos de Dataflow SQL que ya se están ejecutando.

Para obtener información sobre cómo crear consultas en Beam SQL, consulta Beam SQL y beam_sql mágico y Descripción general de Beam SQL.