使用 PostgreSQL 数据库 WAL 日志文件

概览

Datastream 使用 PostgreSQL WAL（预写式日志）事务日志来读取 PostgreSQL 数据流。日志存储在数据库服务器上的 WAL 文件中。WAL 日志中的每条记录表示对数据库内某个表中的实际数据做出的一项更改。

为 PostgreSQL WAL 文件设置配置参数

建议您对 PostgreSQL 数据库应用以下配置设置：

  • max_slot_wal_keep_size：设置此参数（仅适用于 PostgreSQL 13 及更高版本）以限制复制槽使用的存储空间量。此参数只能在 postgresql.conf 文件中或使用服务器命令行进行设置。

  • wal_sender_timeout：将此参数设置为 0（以停用超时设置）或大于或等于 10 分钟的值。

如果您计划创建超过 10 个数据流，或者除计划的数据流数量之外，其他资源使用的逻辑复制槽数超过 10，请务必修改以下参数：

  • max_replication_slots：根据为数据库设置的复制槽数，增加此参数的值（每个数据流需要 1 个复制槽）。您只能在服务器启动时设置 max_replication_slots。

  • max_wal_senders：增加此参数的值，使其大于 max_replication_slots 参数的值。您只能在启动服务器时设置 max_wal_senders。