Datastream usa el registro de transacciones WAL (registro de escritura por adelantado) de PostgreSQL para leer flujos de PostgreSQL. El registro se almacena en archivos WAL en el servidor de la base de datos. Cada registro del registro de WAL representa un solo cambio en los datos reales de una de las tablas de la base de datos.
Establece parámetros de configuración para los archivos WAL de PostgreSQL
Te recomendamos que apliques la siguiente configuración a tu base de datos de PostgreSQL:
max_slot_wal_keep_size
: Establece este parámetro (disponible solo para PostgreSQL 13 y versiones posteriores) para limitar la cantidad de almacenamiento que usa el espacio de replicación. Esto es especialmente importante para las transacciones de larga duración, que, en casos extremos, pueden provocar que el tamaño del archivo WAL ocupe todo el almacenamiento y haga que la base de datos falle.statement_timeout
: Establece este parámetro en un valor seleccionado para reducir la latencia causada por las transacciones de larga duración. También puedes usarstatement_timeout
como medida de precaución alternativa para bases de datos que no admitenmax_slot_wal_keep_size
.wal_sender_timeout
: Establece este parámetro en0
(para inhabilitar el tiempo de espera) o en un valor mayor o igual a 10 minutos.
Si planeas crear más de 10 transmisiones o si la cantidad de ranuras de replicación lógicas que usan otros recursos, además de la cantidad de transmisiones planificadas, supera los 10, asegúrate de modificar los siguientes parámetros:
max_replication_slots
: Aumenta el valor de este parámetro según la cantidad de ranuras de replicación establecidas para tu base de datos (necesitas 1 ranura de replicación por flujo). Solo puedes configurarmax_replication_slots
al inicio del servidor.max_wal_senders
: Aumenta el valor de este parámetro para que sea mayor que el valor del parámetromax_replication_slots
. Solo puedes configurarmax_wal_senders
cuando inicias el servidor.
¿Qué sigue?
- Obtén más información sobre PostgreSQL como fuente.
- Obtén más información para configurar una base de datos de PostgreSQL de origen.