Mit WAL-Logdateien der PostgreSQL-Datenbank arbeiten

Übersicht

Datastream verwendet das PostgreSQL-Transaktionsprotokoll WAL (Write Ahead Log), um PostgreSQL-Streams zu lesen. Das Protokoll wird in WAL-Dateien auf dem Datenbankserver gespeichert. Jeder Datensatz im WAL-Log steht für eine einzelne Änderung an den tatsächlichen Daten in einer der Tabellen in der Datenbank.

Konfigurationsparameter für PostgreSQL-WAL-Dateien festlegen

Es wird empfohlen, die folgenden Konfigurationseinstellungen auf Ihre PostgreSQL-Datenbank anzuwenden:

  • max_slot_wal_keep_size: Mit diesem Parameter (nur für PostgreSQL 13 und höher verfügbar) können Sie die vom Replikationsslot verwendete Speichermenge begrenzen. Dies ist besonders wichtig für lang laufende Transaktionen, die in Extremfällen dazu führen können, dass die WAL-Datei den gesamten Speicher belegt und die Datenbank abstürzt.

  • statement_timeout: Legen Sie für diesen Parameter einen ausgewählten Wert fest, um die Latenz aufgrund von Transaktionen mit langer Ausführungszeit zu verringern. Sie können statement_timeout auch als alternative Vorsichtsmaßnahme für Datenbanken verwenden, die max_slot_wal_keep_size nicht unterstützen.

  • wal_sender_timeout: Legen Sie für diesen Parameter den Wert 0 fest, um die Zeitüberschreitung zu deaktivieren, oder einen Wert, der mindestens 10 Minuten beträgt.

Wenn Sie mehr als 10 Streams erstellen möchten oder die Anzahl der logischen Replikationsslots, die zusätzlich zu den geplanten Streams von anderen Ressourcen verwendet werden, 10 übersteigt, müssen Sie die folgenden Parameter ändern:

  • max_replication_slots: Erhöhen Sie den Wert dieses Parameters in Abhängigkeit von der Anzahl der Replikationsslots, die für Ihre Datenbank festgelegt sind (Sie benötigen 1 Replikationsslot pro Stream). Sie können max_replication_slots nur beim Starten des Servers festlegen.

  • max_wal_senders: Erhöhen Sie den Wert dieses Parameters, sodass er größer als der Wert des Parameters max_replication_slots ist. Sie können max_wal_senders nur festlegen, wenn Sie den Server starten.

Nächste Schritte