Consulta los conectores compatibles con Application Integration.

Dataflow - Crear tarea

La tarea Dataflow - Create Job (Dataflow - Crear tarea) te permite crear una tarea en Cloud Dataflow para ejecutar un flujo de datos creado con uno de los SDKs de Apache Beam.

Cloud Dataflow es un servicio de Google Cloud totalmente gestionado que permite ejecutar flujos de procesamiento de datos por lotes y de streaming.

Antes de empezar

Antes de configurar la tarea Dataflow - Create Job (Dataflow - Crear tarea), asegúrate de realizar las siguientes acciones en tu proyecto de Google Cloud:

  1. Habilita la API de Dataflow (dataflow.googleapis.com).

    Habilita la API Dataflow

  2. Crea un perfil de autenticación. Integración de aplicaciones usa un perfil de autenticación para conectarse a un endpoint de autenticación de la tarea Dataflow - Create Job (Dataflow - Crear trabajo).

    Para obtener información sobre cómo conceder roles o permisos adicionales a una cuenta de servicio, consulta Conceder, cambiar y revocar el acceso.

Configurar la tarea Dataflow - Crear tarea

  1. En la Google Cloud consola, ve a la página Integración de aplicaciones.

    Ir a Application Integration

  2. En el menú de navegación, haz clic en Integraciones.

    Aparecerá la página Integraciones, en la que se muestran todas las integraciones disponibles en el proyecto de Google Cloud.

  3. Seleccione una integración o haga clic en Crear integración para crear una.

    Si vas a crear una integración:

    1. Escribe un nombre y una descripción en el panel Crear integración.
    2. Selecciona una región para la integración.
    3. Selecciona una cuenta de servicio para la integración. Puede cambiar o actualizar los detalles de la cuenta de servicio de una integración en cualquier momento desde el panel Resumen de la integración de la barra de herramientas de integración.
    4. Haz clic en Crear. La integración que acabas de crear se abre en el editor de integraciones.

  4. En la barra de navegación del editor de integraciones, haz clic en Tareas para ver la lista de tareas y conectores disponibles.
  5. Haga clic en el elemento Dataflow - Create Job (Dataflow - Crear tarea) y colóquelo en el editor de integraciones.
  6. Haga clic en el elemento Dataflow - Create Job (Dataflow - Crear tarea) del diseñador para ver el panel de configuración de la tarea Dataflow - Create Job (Dataflow - Crear tarea).
  7. Ve a Autenticación y selecciona un perfil de autenticación que quieras usar.

    Opcional. Si no has creado un perfil de autenticación antes de configurar la tarea, haz clic en + Nuevo perfil de autenticación y sigue los pasos que se indican en Crear un perfil de autenticación.

  8. Ve a Entrada de tarea y configura los campos de entrada que se muestran con la siguiente tabla Parámetros de entrada de tarea.

    Los cambios en los campos de entrada se guardan automáticamente.

Parámetros de entrada de la tarea

En la siguiente tabla se describen los parámetros de entrada de la tarea Dataflow - Create Job (Dataflow - Crear tarea):

Propiedad Tipo de datos Descripción
Región Cadena Ubicación de Cloud Dataflow de la tarea.
ProjectsId Cadena El ID de tu proyecto de Google Cloud.
Ubicación Cadena El endpoint regional que contiene esta tarea.
Solicitud JSON Consulta la estructura JSON de la solicitud.

Salida de la tarea

La tarea Dataflow - Create Job devuelve la instancia recién creada de Job.

Estrategia de gestión de errores

Una estrategia de gestión de errores de una tarea especifica la acción que se debe llevar a cabo si la tarea falla debido a un error temporal. Para obtener información sobre cómo usar una estrategia de gestión de errores y conocer los diferentes tipos de estrategias de gestión de errores, consulta Estrategias de gestión de errores.

Cuotas y límites

Para obtener información sobre las cuotas y los límites, consulta Cuotas y límites.

Siguientes pasos