E/S gerenciada pelo Dataflow

O conector de E/S gerenciado é uma transformação do Apache Beam que fornece uma API comum para criar origens e coletores. No back-end, o Dataflow trata o conector de E/S gerenciado como um serviço, o que permite que o Dataflow gerencie operações de ambiente de execução para o conector. Assim, é possível se concentrar na lógica de negócios do pipeline, em vez de gerenciar esses detalhes.

O conector de E/S gerenciado é criado usando o código do Apache Beam, assim como qualquer outro conector de E/S. Especifique uma origem ou um coletor para instanciar e transmitir um conjunto de parâmetros de configuração. Também é possível colocar os parâmetros de configuração em um arquivo YAML e fornecer um URL para o arquivo.

O conector de E/S gerenciado é compatível com as seguintes origens e coletores:

Para mais informações sobre a API E/S gerenciada, consulte Managed na documentação do SDK do Apache Beam para Java.