Modelo de programación para SDK de Cloud Dataflow 2.x

En el sitio web de Apache Beam, puedes encontrar la Guía de programación de Apache Beam, una guía completa que te enseñará los diversos conceptos básicos de compilación de canalizaciones con los SDK de Apache Beam. Estos conceptos incluyen lo siguiente:

  • PCollections: la abstracción PCollection representa un conjunto de datos de elementos múltiples que puede distribuirse y que actúa como los datos de la canalización. Las transformaciones de Beam usan objetos de PCollection como entradas y salidas.
  • Transformaciones: estas son las operaciones en tu canalización. Una transformación toma una PCollection (o varias PCollections) como entrada, realiza la operación que especifiques en cada elemento de esa colección y produce una PCollection de salida nueva.
  • E/S de canalización: Beam proporciona transformaciones de lectura y escritura para una variedad de tipos de almacenamiento de datos comunes y te permite crear el tuyo.
Apache Beam™ es una marca registrada de The Apache Software Foundation o sus filiales en Estados Unidos o en otros países.
¿Te sirvió esta página? Envíanos tu opinión:

Enviar comentarios sobre…

¿Necesitas ayuda? Visita nuestra página de asistencia.