Pg数据库主从复制
前言：公司的一台服务器因为断电导致系统损坏，经过3天的抢修，将服务器和数据恢复。为了避免数据的丢失，先将数据备份，并进行高可用。
采用技术：keepalived+pg
后期并实现zabbix对pg的端口检测和好可用的检测
实验环境：
pg主库： centos7.9：192.168.60.50
pg从库： centos7.9： 192.168.60.164
实际生产是:
一台Centos7.9 作为主库
一台ubuntu20.04 作为从库
以实验测试环境为主：
安装pg数据库
该实验docker为主，采用docker-compose安装
[root@localhost pg]# cat docker-compose.yml
version: '3.7'
services:postgis:image: postgis/postgis:12-3.2 container_name: postgisrestart: alwaysenvironment:# POSTGRES_DB: postgresPOSTGRES_USER: postgresPOSTGRES_PASSWORD: 123456ALLOW_IP_RANGE: 0.0.0.0/0ports:- "5436:5432"volumes:- ./postgis/pg_data/data/:/var/lib/postgresql/data/ # 将本地 data 目录映射到容器内的 /var/lib/postgresql/data - /etc/localtime:/etc/localtime:ro
对挂载目录赋权限
useradd postgres
chown postgres:postgres -R postgis/
chmod +x postgis/ -R
修改完切记要重启容器
创建主从复制用户（流复制）
root@d94353c96edf:/# psql -Upostgres
psql (12.12 (Debian 12.12-1.pgdg110+1))
Type "help" for help.
postgres=#CREATE ROLE replica login replication encrypted password 'replica';执行创建sql语句，第三列是上面创建的用于复制的用户名，第四列为从节点ip地址
CREATE ROLE replica login replication encrypted password 'replica';
修改./data/pg_hba.conf文件
允许从库IP可以通过repl用户连接主库
# local DATABASE USER METHOD [OPTIONS]host replication replica 192.168.60/164/24 md5修改主库上的配置文件（postgresql.conf文件）
listen_addresses = '*' #允许数据库监听所有IP地址，即可以通过任何网络接口连接。
archive_mode = on #启用归档模式，允许数据库将 WAL（Write-Ahead Logging）日志文件存档。
archive_command = '/bin/date' #只是将日期打印出来，取消了真正的归档。
wal_level = replica #设置为 replica，表示开启了逻辑复制以支持热备。
max_wal_senders = 10 #设置能够连接到主服务器进行 WAL 复制的最大连接数。这是为了支持有多个从服务器的场景。
wal_keep_size = 1024 #设置 WAL 文件的保留大小，以兆字节（M）为单位。超过这个大小的日志文件将不会被删除，以便后续从备份中进行还原。
wal_sender_timeout = 60s #设置 WAL 发送者（主服务器）发送数据的超时时间，这里是60秒。
max_connections = 100 #设置数据库允许的最大连接数。在这里要注意，从库的最大连接数必须大于主库的连接数，确保从库可以处理主库发送的所有连接。
#退出容器，并重启
docker restart postgres
从库设置
启动从库先不要挂载目录
切记
进入到从库postgres的容器内配置流复制
docker exec -it postgis bash
#删除数据，并将主节点数据同步过来
rm -rf /var/lib/postgresql/data/*
#使用pg_basebackup命令备份主数据库中的数据
pg_basebackup -h 192.168.60.50 -p 5436 -U replica --password -X stream -Fp --progress -D /var/lib/postgresql/data/ -R;
#数据同步后容器会关闭。再启动即可 docker start postgres
将数据目录copy出来后在挂载目录
mkdir -p ./postgis/pg_data/cd ./postgis/pg_data/
docker cp postgis:/var/lib/postgresql/data/ ./
配置权限
useradd postgres
chown postgres:postgres -R postgis/
chmod +x postgis/ -R
打开挂载目录在进行挂载
打开注释的挂载目录即可
修改从库的配置
#创建文件vi /var/lib/postgresql/data/standby.signal 添加下面这行内容声明从库
standby_mode = 'on'
#修改文件vi /var/lib/postgresql/data/postgresql.conf 修改以下配置
wal_level = replica # 设置 WAL 日志的级别为 replica，表示开启逻辑复制以支持热备。
primary_conninfo = 'host=192.168.60.50 port=5236 user=replica password=replica' # 配置主库ip地址以及端口号，以及用于复制的用户名和密码
hot_standby = on # 在恢复期间允许查询。这是在流复制过程中，从库在进行 WAL 日志恢复的同时允许查询读取。
recovery_target_timeline = latest # 设置恢复的目标时间线。在这里，设置为 latest 表示从库将一直尝试连接到主库的最新时间线上。
max_connections = 120 #必须大于主节点的连接数。这确保从库可以处理主库发送的所有连接请求。
#重启从库
查看主从状态
#进入主节点容器，
docker exec -it postgis bash
[root@localhost data]# docker exec -it postgis bash
root@af2d730a2610:/# psql -U postgres
psql (12.12 (Debian 12.12-1.pgdg110+1))
Type "help" for help.postgres=# select client_addr,sync_state from pg_stat_replication;client_addr | sync_state
----------------+------------192.168.60.164 | async
(1 row)postgres=#
在主库创建一个库
create database test;
从库查看
postgres=# .\lList of databasesName | Owner | Encoding | Collate | Ctype | Access privileges
------------------+----------+----------+------------+------------+-----------------------postgres | postgres | UTF8 | en_US.utf8 | en_US.utf8 | template0 | postgres | UTF8 | en_US.utf8 | en_US.utf8 | =c/postgres +| | | | | postgres=CTc/postgrestemplate1 | postgres | UTF8 | en_US.utf8 | en_US.utf8 | =c/postgres +| | | | | postgres=CTc/postgrestemplate_postgis | postgres | UTF8 | en_US.utf8 | en_US.utf8 | test | postgres | UTF8 | en_US.utf8 | en_US.utf8 |
(5 rows)postgres-# 同步成功
下一阶段在生产迁移，并通过keepalived做到高可用
并且在zabbix进行数据库端口的监控
