Dataflow SQL

Dataflow ha dejado de ofrecer asistencia para Dataflow SQL. Se trata de un cambio incompatible.

  • Desde el 31 de julio del 2024, no podrá acceder a Dataflow SQL en laGoogle Cloud consola.
  • Desde el 31 de enero del 2025, no podrás usar Dataflow SQL en la CLI de Google Cloud.

Sustitución: Beam SQL

Beam SQL te permite consultar PCollections acotados y no acotados con instrucciones SQL. Si estás trabajando en un cuaderno de Apache Beam, puedes usar el comando mágico personalizado de IPython beam_sql para acelerar el desarrollo de tu canalización.

Beam SQL ofrece funciones similares a las de Dataflow SQL, ya que usa instrucciones SQL para consultar PCollections.

Migración

Te recomendamos que empieces a migrar tu consulta de Dataflow SQL a Beam SQL lo antes posible.

El cambio a Beam SQL es un cambio incompatible que afecta a cualquier tarea o consulta de Dataflow SQL. Tendrás que volver a crear estos trabajos y consultas.

Con este cambio, no podrás crear tareas de Dataflow SQL. Sin embargo, este cambio no afecta a las tareas de Dataflow SQL que ya estén en ejecución.

Para obtener información sobre cómo crear consultas en Beam SQL, consulta Beam SQL y beam_sql magic y Descripción general de Beam SQL.