首页 > 数据库 >PostgreSQL的同步异步复制简介及互相转换

PostgreSQL的同步异步复制简介及互相转换

时间:2024-08-11 15:06:59浏览次数:14  
标签:主库 异步 PostgreSQL postgres lsn 简介 disable 备库 14

  1. PostgreSQL的同步/异步复制简介及互相转换

一、介绍

1.概念

1.1.同步流复制

同步流复制就是当主库发生变化,比如有一条DML语句产生了WAL日志后,通过后台进程传送到备库,备库必须要应用这个日志,然后向主库返回一个成功应用的信号,主库才可以成功的commit;否则主库会一直等待到备库成功应用后,期间的等待就是主库commit后返回成功的时间段。同步流复制是PostgreSQL9.1后才有的。

1.2.异步流复制

异步流复制与同步流复制相反,即主库产生变化,再将WAL日志传递到备库,不需要等待备库应用完成,只需要成功传递WAL日志即返回commit。

2.优缺点

2.1.同步流复制的优缺点

优点:主备库数据无延迟,适用于负载均衡,读写分离的情况。

缺点:会影响主库的提交性能,如果在一个繁忙的业务系统中备库存在异常问题,备库无法应用或者没有及时的返回commit,主库就会出现长时间的等待或者宕机。而且一主一备环境如果配置了synchronous_standby_names参数后,备库一旦出现异常,无法正常写入,主库写操作也会一直等待,如采用同步流复制建议采用一主多备(大于等于两个备库)。

2.2.异步流复制的优缺点

优点:主库提交不受影响,备库出现异常时主库仍然可以正常运行。

缺点:主备库之间会存在数据延迟情况,主备库切换后可能存在数据丢失,而且备库宕机后无明显提示,如果采用复制槽,主库会积攒大量wal文件,会有磁盘爆满的情况出现。

二、同步/异步相互转换

1.异步流复制转换同步流复制

1.1.主库修改参数

alter system set synchronous_standby_names = 'walreceiver';  -- 同步流复制才配置该值
synchronous_commit = on  --默认值为on,一般不需要修改
select pg_reload_conf();

注:synchronous_standby_names 为同步流复制下从库的application_name。

1.2.备库修改参数

## 添加 application_name
vi postgresql.auto.conf
primary_conninfo = 'application_name=walreceiver user=repl password=postgres channel_binding=disable host=192.168.198.146 port=5432 sslmode=disable sslcompression=0 sslsni=1 ssl_min_protocol_version=TLSv1.2 gssencmode=disable krbsrvname=postgres target_session_attrs=any'

ALTER DATABASE postgres SET primary_conninfo = 'application_name=walreceiver user=repl password=postgres channel_binding=disable host=192.168.198.146 port=5432 sslmode=disable sslcompression=0 sslsni=1 ssl_min_protocol_version=TLSv1.2 gssencmode=disable krbsrvname=postgres target_session_attrs=any';

1.3.重新加载配置

pg_ctl reload

1.4.检查同步

## 主库检查
postgres=# select client_addr,state,sync_state from pg_stat_replication;
  client_addr   |   state   | sync_state 
----------------+-----------+------------
 192.168.198.143 | streaming | sync
(1 row)

postgres=# select * from pg_stat_replication;
-[ RECORD 1 ]----+------------------------------
pid              | 15941
usesysid         | 10
usename          | postgres
application_name | standby1
client_addr      | 192.168.198.143
client_hostname  | 
client_port      | 41592
backend_start    | 2023-12-14 13:29:51.005534+08
backend_xmin     | 
state            | streaming
sent_lsn         | 0/43000998
write_lsn        | 0/43000998
flush_lsn        | 0/43000998
replay_lsn       | 0/43000998
write_lag        | 
flush_lag        | 
replay_lag       | 
sync_priority    | 1
sync_state       | sync
reply_time       | 2023-12-14 13:37:46.05816+08

## 备库检查
postgres=# select * from pg_stat_wal_receiver;
-[ RECORD 1 ]---------+--------------------------------------------------------------------
pid                   | 15677
status                | streaming
receive_start_lsn     | 0/43000000
receive_start_tli     | 2
written_lsn           | 0/43000998
flushed_lsn           | 0/43000998
received_tli          | 2
last_msg_send_time    | 2023-12-14 13:38:06.903124+08
last_msg_receipt_time | 2023-12-14 13:38:26.074047+08
latest_end_lsn        | 0/43000998
latest_end_time       | 2023-12-14 13:34:06.516149+08
slot_name             | 
sender_host           | 192.168.198.146
sender_port           | 5432
conninfo              | user=postgres password=******** channel_binding=disable dbname=replication host=192.168.198.146 port=5432 application_name=standby1 fallback_application_name=walreceiver sslmode=disable sslcompression=0 sslsni=1 ssl_min_protocol_version=TLSv1.2 gssencmode=disable krbsrvname=postgres target_session_attrs=any

2.同步流复制转换异步流复制

2.1.主库修改参数

alter system reset synchronous_standby_names;
select pg_reload_conf();

2.2.备库修改参数

## 删除 application_name
vi postgresql.auto.conf
primary_conninfo = 'user=postgres password=postgres channel_binding=disable host=192.168.198.146 port=5432 sslmode=disable sslcompression=0 sslsni=1 ssl_min_protocol_version=TLSv1.2 gssencmode=disable krbsrvname=postgres target_session_attrs=any'

1.3.重新加载配置

pg_ctl reload

2.4.检查同步

## 主库检查
postgres=# select client_addr,state,sync_state from pg_stat_replication;
  client_addr   |   state   | sync_state 
----------------+-----------+------------
 192.168.198.143 | streaming | async
(1 row)

postgres=# select * from pg_stat_replication;
-[ RECORD 1 ]----+------------------------------
pid              | 16296
usesysid         | 10
usename          | postgres
application_name | walreceiver
client_addr      | 192.168.198.143
client_hostname  | 
client_port      | 41594
backend_start    | 2023-12-14 13:54:40.95684+08
backend_xmin     | 
state            | streaming
sent_lsn         | 0/43000D40
write_lsn        | 0/43000D40
flush_lsn        | 0/43000D40
replay_lsn       | 0/43000D40
write_lag        | 
flush_lag        | 
replay_lag       | 
sync_priority    | 0
sync_state       | async
reply_time       | 2023-12-14 14:03:17.086516+08

## 备库检查
postgres=# select * from pg_stat_wal_receiver;
-[ RECORD 1 ]---------+-------------------------------------------------------------------------
pid                   | 15972
status                | streaming
receive_start_lsn     | 0/43000000
receive_start_tli     | 2
written_lsn           | 0/43000D40
flushed_lsn           | 0/43000D40
received_tli          | 2
last_msg_send_time    | 2023-12-14 14:03:07.740902+08
last_msg_receipt_time | 2023-12-14 14:03:26.911762+08
latest_end_lsn        | 0/43000D40
latest_end_time       | 2023-12-14 13:59:07.345619+08
slot_name             | 
sender_host           | 192.168.198.146
sender_port           | 5432
conninfo              | user=postgres password=******** channel_binding=disable dbname=replication host=192.168.198.146 port=5432 application_name=standby1 fallback_application_name=walreceiver sslmode=disable sslcompression=0 sslsni=1 ssl_min_protocol_version=TLSv1.2 gssencmode=disable krbsrvname=postgres target_session_attrs=any

标签:主库,异步,PostgreSQL,postgres,lsn,简介,disable,备库,14
From: https://www.cnblogs.com/zreo2home/p/18353385

相关文章

  • PostgreSQL的一主一从集群搭建部署
    1.PostgreSQL的一主一从集群搭建部署1.目标​ 掌握Postgresql数据库主从部署搭建配置2.脉络部署规划PostgreSQL单节点安装PostgreSQL主从部署配置主从同步验证3.部署搭建3.1基础准备1.1创建两台虚拟机虚拟机名IPhostname主从划分test11192.168.198......
  • 搭建PostgreSQL高可用集群(基于Patroni+Etcd)
    搭建PostgreSQL高可用集群(基于Patroni+Etcd)1.主机环境准备节点名称主机名网卡IP地址OS安装软件角色作用PGSQL1pgsql1ens33192.168.198.162CentOS7PostgreSQL、ETCD、Patroni主数据库PGSQL2pgsql2ens33192.168.198.163CentOS7PostgreSQL、ETCD、Patr......
  • PostgreSQL15.6源码编译安装
    1.postgres数据库源码下载地址,自己选择对应版本,我这里是15.6https://www.postgresql.org/ftp/source/2.编译cd/data/make/postgresql-15.6./configure--prefix=/pgdata/postgres15make-j$(nproc)#加快编译速度,自动获取对应cpu核心数makeinstall3.创建postgres用户......
  • PostgreSQL 读取表主键和唯一键的SQL
    给定表名,读取对应的约束字段(主键,唯一键)SELECTtc.* FROMinformation_schema.table_constraintstc JOINinformation_schema.constraint_column_usageASccuUSING(constraint_schema,constraint_name) JOINinformation_schema.columnsAScONc.table_schem......
  • Java中的异步编程模型与事件处理框架:从CompletableFuture到Reactive Streams
    Java中的异步编程模型与事件处理框架:从CompletableFuture到ReactiveStreams大家好,我是微赚淘客系统3.0的小编,是个冬天不穿秋裤,天冷也要风度的程序猿!在现代软件开发中,异步编程和事件驱动架构变得越来越重要。它们能有效提高应用程序的性能和响应速度,特别是在处理高并发和I......
  • M16半履带防空车简介
    事情的起因是这样的某不知名OIer在犇犇里面发了一张顺丰快递载着4联装防空炮的照片(虽然显然不是真的)。我定睛一看。它拉着的这一坨是来自美国M16半履带防空车的四联装防空炮。1945年5月,德国波西米亚(Bohemia)地区,隶属美军第3军一辆未明单位的M16型半履带装甲车。那就简单介绍......
  • 单体应用提高性能及处理高并发-异步处理与消息队列
            在单体应用中,应对高并发和提升性能是开发者常面对的挑战。异步处理与消息队列是两个有效的手段,可以帮助开发者将耗时操作与主线程分离,减少阻塞,提高系统的响应速度和吞吐量。1.异步处理异步处理允许应用程序在执行耗时操作时不阻塞主线程。这对于提高系统性......
  • React深度解析三:高级用法HOC、Hooks、异步组件
    本文分文三部分:HOC高阶组件higherordercomponentHooks16.8版本后新增的钩子API异步组件使用lazy和suspense两个api实现组件代码打包分割和异步加载一、HOC高阶组件1、定义高阶组件不是组件而是函数,是react中用于复用组件逻辑的高级技巧,HOC本身不是react一部分,是基于......
  • C语言问答进阶--2、C语言简介及基本的输入输出函数
    C语言简介Q:您好,能大体介绍下C语言吗?A:当然可以。C语言是一种计算机语言,它主要被用在系统编程里,可以说,C语言的产生就和操作系统的编写密不可分。【C语言简要历史】1978年由美国电话电报公司(AT&T)的贝尔实验室正式发表了C语言。同时由B.W.Kernighan和D.M.Ritchie合著了著......
  • 8051 中断号简介
    8051架构是一种经典的微控制器架构,广泛应用于各种嵌入式系统中。在8051架构中,中断是一种重要的机制,用于处理异步事件,如外部设备的输入、定时器的溢出等。每个中断都有一个对应的中断号,用于标识和处理不同的中断源。以下是8051架构中常见的中断号及其对应的硬件资源:外部中断0(......