Dataflow 托管式 I/O

托管式 I/O 连接器是一种 Apache Beam 转换,可提供用于创建来源和接收器的通用 API。在后端,Dataflow 将托管式 I/O 连接器视为服务,让 Dataflow 能够管理连接器的运行时操作。然后,您可以专注于流水线中的业务逻辑,而无需管理这些细节。

您可以使用 Apache Beam 代码创建托管式 I/O 连接器,就像创建任何其他 I/O 连接器一样。您可以指定要实例化的来源或接收器并传入一组配置参数。 您还可以将配置参数放入 YAML 文件中,并提供该文件的网址。

托管式 I/O 连接器支持以下来源和接收器:

如需详细了解托管式 I/O API,请参阅 Apache Beam Java SDK 文档中的 Managed