首页 > 数据库 >Redis学习之Redis持久化

Redis学习之Redis持久化

时间:2024-10-19 18:20:50浏览次数:3  
标签:AOF 持久 文件 Redis 学习 RDB 数据

一、简介

       Redis 的持久化是指将 Redis 内存中的数据保存到磁盘上,以确保在服务器停机或发生故障时,数据不会丢失。Redis 提供了多种持久化机制,可以根据具体的应用场景和需求来选择合适的方式。

Redis提供了2种不同形式的持久化方式:

RDB(Redis DataBase) :将当前数据状态进行保存,快照形式,存储数据结果,存储格式简单,关注点在数据。
AOF(Append Of File) : 将数据的操作过程进行保存,日志形式,存储操作过程,关注点在数据的操作过程。AOF会将 redis 执行过的所有写指令记录下来,在下次 redis 重新启动时,只要把这些写指令从前到后再重复执行一遍,就可以实现数据恢复了。

二、RDB方式

概念:
       在指定的时间间隔内将内存中的数据集快照写入磁盘, 也就是行话讲的Snapshot快照,它恢复时是将快照文件直接读到内存里。

1.RDB手动

save指令
命令 :save
作用 :手动执行一次保存操作

save指令相关配置:
dbfilename dump.rdb
说明:设置本地数据库文件名,默认值为 dump.rdb
经验:通常设置为 dump-端口号.rdb
dir
说明:设置存储.rdb文件的路径
经验:通常设置成存储空间较大的目录中,目录名称data
rdbcompression yes
说明:设置存储至本地数据库时是否压缩数据,默认为 yes,采用 LZF算法 压缩
经验:通常默认为开启状态,如果设置为no,可以节省 CPU 运行时间,但会使存储的文件变大(巨大)
rdbchecksum yes
说明:设置是否进行CRC64算法RDB文件格式校验, 该校验过程在写文件和读文件过程均进行
经验:通常默认为开启状态,如果设置为no,可以节约读写性过程约10%时间消耗,但是存储一定的数据损坏风险

2.RDB自动


配置 :save second changes
作用 : 满足限定时间范围内key的变化数量达到指定数量即进行持久化
参数 :
second:监控时间范围
changes:监控key的变化量
位置 : 在conf文件中进行配置
注意:
save配置要根据实际业务情况进行设置,频度过高或过低都会出现性能问题,结果可能是灾难性的
save配置中对于second与changes设置通常具有互补对应关系,尽量不要设置成包含性关系
save配置启动后执行的是bgsave操作

RDB优点:
生成的数据文件较小,便于备份和传输。
RDB 持久化是通过创建子进程来进行的,所以不会阻塞主线程。
RDB恢复数据的速度要比AOF快很多 
RDB节省磁盘空间


RDB缺点:
Fork的时候,内存中的数据被克隆了一份,大致2倍的膨胀性需要考虑
虽然Redis在fork时使用了写时拷贝技术,但是如果数据庞大时还是比较消耗性能
RDB方式无论是执行指令还是利用配置,无法做到实时持久化,具有较大的可能性丢失数据
Redis的众多版本中未进行RDB文件格式的版本统一,有可能出现各版本服务之间数据格式无法兼容现象。

三、AOF方式

概念:AOF 持久化通过记录每个写命令来保存数据。每次 Redis 执行写命令时,都会将该命令追加到 AOF 文件的末尾。当服务器重启时,Redis 会重新执行 AOF 文件中的命令来恢复数据。


1.AOF写数据三种策略(appendfsync)


always(每次)
每次写入操作均同步到AOF文件中,数据零误差,性能较低
everysec(每秒)
每秒将缓冲区中的指令同步到AOF文件中,数据准确性较高,性能较高
在系统突然宕机的情况下丢失1秒内的数据
no(系统控制)
由操作系统控制每次同步到AOF文件的周期,整体过程不可控


2.AOF相关配置


配置 :appendonly yes|no
作用 :是否开启AOF持久化功能,默认为不开启状态
配置 :appendfsync always|everysec|no
作用 :AOF写数据策略
配置:appendfilename filename
作用:AOF持久化文件名,默认文件名未appendonly.aof,建议配置为appendonly-端口号.aof
配置:dir
作用 :AOF持久化文件保存路径,与RDB持久化文件保持一致即可


AOF优点:
数据更持久,因为记录的是每个写命令,可以保证数据的完整性。
可以配置不同的同步策略(如每秒同步、每次写命令后同步等)。
AOF缺点:
AOF 文件可能会比 RDB 文件大很多,特别是在频繁写入数据时。
在恢复数据时,执行大量命令可能会导致启动速度较慢。

四、如何选择持久化方式

RDB和AOF对比:

持久化方式RDBAOF
占用存储空间小(数据级:压缩)大(指令级:重写)
存储速度
恢复速度
数据安全性会丢失数据策略决定
资源消耗高/重量级低/轻量级
启动优先级
备份方式全量备份增量备份

选择哪种持久化方式主要取决于你的应用需求:
RDB:适用于需要快速启动并且数据允许短时间丢失的场景。
AOF:适用于对数据完整性要求很高的场景,例如金融应用。
混合持久化:在需要兼顾性能和数据完整性的情况下,可以考虑使用混合持久化。(是将 RDB 和 AOF 的优点结合起来的一种持久化方式。在混合持久化过程中,Redis 会首先生成一个 RDB 快照,然后将后续的写命令以 AOF 格式追加到文件的末尾。)

在实际应用中,还可以根据具体的配置参数来优化持久化过程,如设置合理的快照生成时间间隔、AOF 重写策略等。

标签:AOF,持久,文件,Redis,学习,RDB,数据
From: https://blog.csdn.net/indiansummer_/article/details/143063530

相关文章

  • 乘风破浪,扬帆出海,Praxis Language旗下基于播客形式的英语学习平台之English Pod 365
    什么是EnglishPod365EnglishPod365是PraxisLanguage旗下的一款英语学习平台。PraxisLanguage是一家教育技术公司,专门开发基于播客(podcast)形式的语言学习平台,除了EnglishPod,他们还开发了类似的语言学习产品,如ChinesePod、SpanishPod和FrenchPod等。EnglishPod365是......
  • 学习记录,这该死的c++
    最近还是比较懈怠,除了老师布置的作业其他的也是匆匆过一眼至于代码方面最主要的问题还是不理解该怎么表达。总的来说还是要在多沉淀。为什么会有知道敲代码但是不知道该怎么成功表达这个问题啊?还是不能把代码敲得精简一些可以来个人教我怎么敲关系符号吗?运用的还不是很熟练......
  • Mamba学习笔记(4)——Mamba核心
    文章目录AVisualGuidetoMambaandStateSpaceModels第一部分:TheProblemwithTransformers第二部分:TheStateSpaceModel(SSM)WhatisaStateSpace?WhatisaStateSpaceModel?第三部分:Mamba-SelectiveSSMWhatProblemdoesitattempttoSolve?Selective......
  • 一篇文章弄懂Redission可重入、重试锁以及MultiLock原理
    Redisson的可重入锁(ReentrantLock)是基于Redis实现的分布式锁,用于在分布式系统中提供线程安全的锁机制。它允许同一个线程在不释放锁的情况下多次获得锁,并在所有锁操作完成后,锁才真正被释放。下面我们来详细解析Redisson可重入锁的原理。基本原理可重入锁的核心思想是,同一线......
  • Python学习的自我理解和想法(16)
    学的是b站的课程(千锋教育),跟老师写程序,不是自创的代码!今天是学Python的第16天,从今天开始,每天一到两个常用模块,更完恢复到原来的。开学了,时间不多,写得不多,见谅。目录1.datetime模块(1).创建一个日期(2).创建一个时间(3).获取当前的时间(4).获取n天后的时间2.time模块(1)......
  • Java面向对象学习1019-1
    Java面向对象基础1:  面向对象编程是什么,和面向过程有什么区别?  面向对象编程OOP(ObjectOrientedPrograming)是一种程序设计方法,其本质是模仿人的思维来解决问题,把客观世界的实体抽象为对象。不同于面向过程编程POP(ProcedureOrientedPrograming)以过程为中心,关注......
  • java+vue计算机毕设大学生学习交流平台的设计与开发【开题+程序+论文+源码】
    本系统(程序+源码)带文档lw万字以上文末可获取一份本项目的java源码和数据库参考。系统程序文件列表开题报告内容研究背景在当今信息化高速发展的时代,大学生作为社会未来的栋梁,其学习方式和交流模式正经历着深刻的变革。随着互联网技术的普及,大学生对于学习资源的获取不再......
  • Redis相关面试题
    Redis为什么快?1.纯内存KV操作Redis的操作都是基于内存的,CPU不是Redis性能瓶颈,,Redis的瓶颈是机器内存和网络带宽。在计算机的世界中,CPU的速度是远大于内存的速度的,同时内存的速度也是远大于硬盘的速度。redis的操作都是基于内存的,绝大部分请求是纯粹的内存操作,非常......
  • 强化学习算法笔记之【DDPG算法】
    强化学习笔记之【DDPG算法】目录强化学习笔记之【DDPG算法】前言:原论文伪代码DDPG中的四个网络代码核心更新公式前言:本文为强化学习笔记第二篇,第一篇讲的是Q-learning和DQN就是因为DDPG引入了Actor-Critic模型,所以比DQN多了两个网络,网络名字功能变了一下,其它的就是软更新之......
  • 《Pytorch深度学习实践》P8 Dataset and DataLoader 笔记+代码+作业:DataLoader的使用
     b站的up主刘二大人的《PyTorch深度学习实践》P8笔记+代码,视频链接。所需糖尿病数据可以在视频评论区下方的网盘资源里下载(转载评论区):链接:https://pan.baidu.com/s/1cUI518pgLWY1oCn2DkjuEQ?pwd=kif1 提取码:kif1或者是点击链接下载:【免费】b站的up主刘二大人的《PyTorc......