pg_replicate – Ein Tool für die Replikation von Postgres

• Aufbau einer Datenpipeline, die Daten kontinuierlich aus Postgres in andere Systeme kopiert
• Bietet eine Abstraktion über dem „Logical Streaming Replication Protocol“ von Postgres, sodass es ohne Sorgen um Low-Level-Details genutzt werden kann
• Roadmap
  • BigQuery-, DuckDB- und MotherDuck-Sinks sind implementiert (die Duck-Seite soll als Version der Batch-Pipeline neu implementiert werden)
  • Snowflake- und ClickHouse-Sinks sind geplant
• Entwickelt als Rust-Crate und mit cargo ausführbar
  cargo run --example stdout -- --db-host localhost --db-port 5432 --db-name postgres --db-username postgres --db-password password cdc my_publication stdout_slot