首页 > 数据库 >Redis集群之主从模式

Redis集群之主从模式

时间:2023-11-06 23:31:50浏览次数:50  
标签:同步 slave Redis 节点 repl 集群 全量 master 主从

搭建主从架构

单节点Redis的并发能力是有上限的,要进一步提高Redis的并发能力,就需要搭建主从集群,实现读写分离。

Redis集群之主从模式_Redis

假设有A、B两个Redis实例,如何让B作为A的slave节点?

●在B节点执行命令: slaveof A的IP A的port

主从数据同步原理

全量同步

主从第一次同步是全量同步:

Redis集群之主从模式_Redis集群_02

master如何判断slave是不是第一次来同步数据?

这里会用到两个很重要的概念:

Replication Id:简称replid, 是数据集的标记,id- 致则说明是同一数据集。每一个master都有唯一的replid,

slave则会继承master节点的replid

offset:偏移量,随着记录在repl_ baklog 中的数据增多而逐渐增大。slave完成同步时也会记录当前同步的offset。如果slave的offset小于master的offset,说明slave数据落后于master,需要更新。

因此slave做数据同步,必须向master声明自己的replication id和offset, master才可以判断到底需要同步哪些数据

结论:Replication Id不一致,代表第一次同步数据

Redis集群之主从模式_Redis高可用_03

全量同步的流程

1.slave节点请求增量同步

2.master节点判断replid,发现不一致,拒绝增量同步

3.master将完整内存数据生成RDB,发送RDB到slave

4.slave清空本地数据,加载master的RDB

5.master将RDB期间的命令记录在repl_baklog, 并持续将log中的命令发送给slave

6.slave执行接收到的命令,保持与master之间的同步


增量同步

主从第一次同步是全量同步,但如果slave重启后同步,则执行增量同步

Redis集群之主从模式_Redis集群_04


可以从以下几个方面来优化Redis主从就集群:

●在master中配置repl-diskless-sync yes启用无磁盘复制(不将数据写入磁盘进行同步,而是直接通过内存进行数据交换),避免全量同步时的磁盘IO

●Redis单节点上的内存占用不要太大,减少RDB导致的过多磁盘IO

● 适当提高repl_baklog的大小, 发现slave宕机时尽快实现故障恢复,尽可能避免全量同步

●限制一个master.上的slave节点数量,如果实在是太多slave,则可以采用主-从-从链式结构,减少master压力

Redis集群之主从模式_Redis主从_05

简述全量同步和增量同步区别?

●全量同步: master将完整内存数据生成RDB,发送RDB到slave。后续命令则记录在repl baklog, 逐个发送给slave。

●增量同步: slave提交自己的offset到master, master获取repl_baklog中从offset之后的命令给slave

什么时候执行全量同步?

●slave节点第一次 连接master节点时

●slave节点断开时间太久,repl_baklog中的offset已经被覆盖时

什么时候执行增量同步?

●slave节点断开又恢复,并且在repl_baklog中 能找到offset时

标签:同步,slave,Redis,节点,repl,集群,全量,master,主从
From: https://blog.51cto.com/AmbitionGarden/8219644

相关文章

  • 【Redis使用手册】一年多来redis使用markdow笔记总结,第(2)篇:Redis命令操作详解
    Redis是一个高性能的key-value数据库。本文会让你知道:什么是nosql、Redis的特点、如何修改常用Redis配置、写出Redis中string类型数据的增删改查操作命令、写出Redis中hash类型数据的增删改查相关命令、说出Redis中list保存的数据类型、使用StrictRedis对象对string类型数据......
  • Redis 下载与安装 Windows版教程
    ​ 1、下载windows版本的redis由于redis官方更支持我们使用Linux版本;可以下载微软官方维护的支持 Windows平台的Redis安装包下载地址:Releases·microsoftarchive/redis·GitHubtporadowski大神也提供了支持Windows平台的Redis 安装包,目前仍在维护,目前最新版本......
  • Redis下载安装
    1、下载安装包方式一:官网下载想要的版本https://download.redis.io/releases/上传到FinalShell方式二:选择自己想要的版本使用命令下载到指定位置wgethttps://download.redis.io/releases/redis-6.0.10.tar.gz2、解压下载好的压缩包tar-zxvfredis-6.0.10.tar.gz......
  • Redis Functions 介绍之一
    Redis提供了编程接口(programminginterface)可以让你在Redis服务器端执行客户的脚本。一个重大的变化就是从Redis7开始,你可以选择使用RedisFunctions去管理和运行你的脚本,而在此之前你只能使用EVAL命令执行Lua脚本。通过EVAL命令执行的脚本是有缺陷的。如果在Redis服务器端执行......
  • Redis Functions 介绍之一
    Redis提供了编程接口(programminginterface)可以让你在Redis服务器端执行客户的脚本。一个重大的变化就是从Redis7开始,你可以选择使用RedisFunctions去管理和运行你的脚本,而在此之前你只能使用EVAL命令执行Lua脚本。通过EVAL命令执行的脚本是有缺陷的。如果在Redis服务器端执......
  • Redis和Spring Boot:如何协作提高您的应用程序性能
    ......
  • Redis分布式缓存、AOF与RDB详解
    分布式缓存单点Redis的问题1.数据丢失问题Redis是内存存储,服务重启可能会丢失数据2.并发能力问题单节点Redis并发能力虽然不错,但也无法满足如618这样的高并发场景3.故障恢复问题如果Redis宕机,则服务不可用,需要一种自动的故障恢复手段4.存储能力问题Redis基于内存,单节点能存储的数据......
  • Redis创始人开源最小聊天服务器,仅200行代码,几天功夫已获2.8K Star!
    Redis创始人开源最小聊天服务器,仅200行代码,几天功夫已获2.8KStar! 中午时候,在技术交流群里聊起关于Redis创始人的一些趣事,比如离开Redis之后,去写科幻小说之类的。因为好奇科幻小说,TJ君就去搜索了一下。结果一搜,发现Redis作者最近居然又搞了个新活儿!世界上最小的聊天服务器......
  • Redis设置密码以及用redis-cli -a连接redis实例
    要为Redis添加密码,您可以按照以下步骤进行操作:打开Redis配置文件。在大多数情况下,Redis的配置文件名为redis.conf,可以在Redis的安装目录中找到。在配置文件中,找到并取消注释(去掉前面的#符号)以启用密码验证的配置项。找到以下行并确保其没有被注释:requirepassyour_password将your_p......
  • 如何统计redis操作失败的次数
    要统计Redis操作失败的次数,你可以使用Redis的监控功能和相关命令。以下是一种可能的方法:开启Redis的监控功能:在Redis的配置文件中,找到redis.conf文件并确保以下行没有被注释掉:#默认禁用,你可以通过以下命令来开启:configsetnotify-keyspace-eventsKEA这将启用键空间通......