centos postgresql复制原理

CentOS上的PostgreSQL复制原理主要基于WAL（Write-Ahead Logging，预写日志）机制。以下是其详细原理：

一、基础概念

1. WAL（Write-Ahead Logging）：

   • PostgreSQL使用WAL来确保数据的持久性和一致性。
   • 在数据被写入磁盘之前，先写入WAL日志。

2. 复制类型：

   • 流复制（Streaming Replication）：主节点将WAL实时传输给从节点，从节点重放这些日志以保持与主节点的数据同步。
   • 逻辑复制（Logical Replication）：基于发布/订阅模型，复制特定的表或数据库对象的变化。

二、流复制原理

1. 主节点配置

• 在postgresql.conf中启用流复制：

  wal_level = replica
  max_wal_senders = 10
  wal_keep_segments = 64
  hot_standby = on
  

• 创建一个用于复制的超级用户：

  CREATE USER replicator WITH REPLICATION PASSWORD 'your_password' LOGIN;
  

2. 从节点配置

• 在postgresql.conf中配置连接信息：

  primary_conninfo = 'host=master_ip port=5432 user=replicator password=your_password'
  restore_command = 'cp /var/lib/postgresql/wal_archive/%f %p'
  

• 在pg_hba.conf中允许从节点连接：

  host    replication     replicator     master_ip/32    md5
  

3. 启动复制

• 在主节点上创建一个复制槽：

  SELECT * FROM pg_create_physical_replication_slot('replication_slot_name');
  

• 在从节点上启动复制进程：

  pg_basebackup -h master_ip -U replicator -D /var/lib/postgresql/data -X stream -P
  

4. 数据同步过程

• 主节点将WAL日志写入磁盘，并发送给从节点。
• 从节点接收WAL日志并将其写入本地的WAL归档目录（如果配置了restore_command）。
• 从节点重放这些WAL日志，将数据变更应用到自己的数据目录中。

三、逻辑复制原理

1. 发布/订阅模型

• 在主节点上创建一个发布：

  CREATE PUBLICATION my_publication FOR TABLE my_table;
  

• 在从节点上创建一个订阅：

  CREATE SUBSCRIPTION my_subscription
  CONNECTION 'host=master_ip dbname=my_db user=replicator password=your_password'
  PUBLICATION my_publication;
  

2. 数据变更传播

• 当主节点上的发布表发生数据变更时，这些变更会被记录在WAL中。
• 逻辑复制进程会捕获这些变更并将其转换为逻辑格式（如INSERT、UPDATE、DELETE语句）。
• 从节点上的订阅进程会接收这些逻辑格式的变更并应用到本地数据库中。

四、注意事项

• 网络延迟：流复制对网络延迟比较敏感，建议在低延迟的网络环境中使用。
• 硬件资源：复制过程会增加主节点和从节点的I/O负载，需要确保足够的硬件资源。
• 监控和维护：定期监控复制状态，及时处理可能出现的故障。

通过以上步骤和原理，可以在CentOS上实现PostgreSQL的高效复制，确保数据的高可用性和一致性。