首页 > 其他分享 >缓存雪崩问题

缓存雪崩问题

时间:2024-09-09 12:24:10浏览次数:11  
标签:缓存 过期 数据库 问题 雪崩 失效 user

缓存雪崩是缓存中大量key失效后当高并发到来时导致大量请求到数据库,瞬间耗尽数据库资源,导致数据库无法使用。

解决方案:

1、使用锁进行控制

2、对同一类型信息的key设置不同的过期时间

3、缓存预热

1. 什么是缓存雪崩

缓存雪崩是指在短时间内,大量缓存数据同时失效,导致所有请求直接涌向数据库,瞬间增加数据库的负载压力,可能导致数据库性能下降甚至崩溃。这种情况往往发生在缓存中大量 key 设置了相同的过期时间,或者系统出现了大规模宕机、重启、网络故障等异常情况,导致缓存系统大面积失效。

2. 缓存雪崩的产生原因

(1)大量缓存同时失效:当大量缓存数据设置了相同的过期时间或缓存系统崩溃,大量请求绕过缓存直接访问数据库。

(2)缓存系统宕机:缓存系统的故障、重启、维护等问题会导致大批量缓存失效,所有请求直接转向数据库。

(3)高并发场景:在高并发情况下,如果某个时刻大量请求无法从缓存中命中,直接查询数据库,会对数据库造成非常大的压力。

3. 缓存雪崩的危害

(1)数据库压力陡增:缓存失效后,原本由缓存系统承担的压力全部转移到数据库,可能会导致数据库响应变慢甚至崩溃。

(2)服务不可用:当数据库无法承受瞬间大量请求时,系统的整体性能会下降,最终可能导致整个服务不可用。

4. 解决方案

4.1 使用锁进行控制

思路同缓存击穿。见上一篇文章。

4.2 对同一类型信息的key设置不同的过期时间

一种非常常见且有效的预防缓存雪崩的方法是避免大量缓存同时失效。可以通过为同类型的缓存 key 设置不同的过期时间,错开缓存的失效时点。这样即使有缓存数据过期,也不会在短时间内有大量缓存同时失效,进而减少对数据库的冲击。

// 为每个缓存设置不同的过期时间
int randomExpireTime = new Random().nextInt(300);  // 生成一个随机的过期时间差,最大300秒
redisTemplate.opsForValue().set("key1", value, Duration.ofSeconds(3600 + randomExpireTime));  // 基础过期时间为3600秒
redisTemplate.opsForValue().set("key2", value, Duration.ofSeconds(3600 + randomExpireTime));  // 设置不同的随机过期时间

这种方式确保缓存过期的时点是随机分布的,不会集中在同一时间段,能够有效缓解数据库的压力。

4.3 缓存预热

缓存预热可以在系统启动前或者流量高峰期到来之前,将热点数据提前加载到缓存中,确保这些热点数据不会在流量高峰期突然失效,导致数据库压力增大。缓存预热的核心思路是提前将一些重要的数据主动放入缓存中,以减少突然的大量缓存失效问题。

(1)系统启动时预热:在系统启动时,提前将数据库中的热点数据加载到缓存中,确保缓存中已有有效数据。

@PostConstruct
public void preheatCache() {
    List<User> hotUsers = database.getHotUsers();  // 从数据库获取热点数据
    for (User user : hotUsers) {
        cache.put(user.getId(), user);  // 将数据提前加载到缓存中
    }
}

(2)定时任务预热:对于长期热点数据,可以设置定时任务,在缓存即将过期前提前更新缓存数据,确保缓存中始终有有效数据。

@Scheduled(fixedDelay = 60000)  // 每隔一分钟执行一次
public void refreshCache() {
    List<User> hotUsers = database.getHotUsers();  // 定期获取热点数据
    for (User user : hotUsers) {
        cache.put(user.getId(), user);  // 更新缓存
    }
}

标签:缓存,过期,数据库,问题,雪崩,失效,user
From: https://blog.csdn.net/qq_46637011/article/details/142055553

相关文章

  • Redis缓存和Mysql数据一致性问题
            在高并发环境下,保持Redis缓存和MySQL数据库的数据一致性是一个复杂但至关重要的任务。下面是对这一问题的详细讲解,并结合PHP代码示例来展示如何解决这些一致性问题。问题背景Redis缓存和MySQL数据库的主要挑战在于:缓存和数据库之间的延迟:在缓存更......
  • pipenv + 离线移植项目 遇到的问题
    由于即将移植的设备没有网络,像pipenvinstall-rrequirements.txt和pipenvinstall--dev这种需要使用网络的命令就不能使用了,找资料也没有找到什么好的方法。在这里说一说我移植部署成功的做法。我又用回了pip,怪怪的感觉,感觉这样好像就没有必要用pipenv了。实施步骤:1.到项......
  • androidstudio报错devicemanager出错问题
    2024-09-0911:01:57,029[1446798]WARN-Emulator:Pixel8ProAPI35-Failedtoprocess.inifileC:\Users\钁f旦.android\avd<build>.iniforreading.如如何解决1.查日志C:\Users\董浩\AppData\Local\Google\AndroidStudio2024.1\log这个是默认位置我的错误是202......
  • 以MySQL为例,来看看maven-shade-plugin如何解决多版本驱动共存的问题?
    开心一刻清明节那天,看到一小孩在路边烧纸时不时地偷偷往火堆里扔几张考试卷子边烧边念叨:爷爷呀,你岁数大了,在那边多做做题吧,对脑子好,要是有不懂的地方,就把我老师带走,让他教您!前提说明假设MySQL5.7.36的库qsl_datax有表qsl_datax_source和数据CREATETABLE`qsl_datax_source`......
  • 解决vscode终端输出中文乱码问题图文教程
    由于系统终端默认编码为GBK,所以需要修改为UTF-8方法一打开cmd输入chcp查看编码格式,查看以及修改如下图所示:方法二        ......
  • 基于二分混合空间曲线的HBase多维索引构建及查询优化问题研究
    目录1绪论11.1研究背景与意义11.2国内外研究现状21.2.1索引技术21.2.2空间填充曲线51.3论文主要工作61.4论文章节安排72相关理论基础与技术简介82.1大数据存储与计算技术82.1.1Hadoop生态圈82.1.2HDFS82.1.3HBase92.1.4SparkStreami......
  • 【2024-09-06】新的问题
    20:00天上有多少星,地上就有多少人。树冠有多少叶,树蔸下就会有多少根。每片叶和每条根都是在做分内的事。人把这些树事看懂了的时候,就明白一件事,什么都在记录,什么都活在当下,也活在历史里。                            ......
  • 前端css样式优先级问题
    一、常用选择器1.标签选择器(标签名{}),选中对应标签里的内容,例(div{})2.类选择器(.类名{}),选中对应类名的内容,例(.one{})   注:不可以数字开头,一个标签中可有多个类名3.id选择器(#id{}),选中对应id的内容,例(#one{})   注:不可以数字开头,一个标签里只能有一个id属性4.通配符选择器(*{}),......
  • 【详解】网络隔离环境下,跨网文件交换存在的核心问题及解决方法
    一、为什么要进行网络隔离?随着互联网技术的发展和推进,人们对于网络使用的场景也越来越多元化,而网络黑客入侵、病毒攻击、网络泄密等安全事件的不断发生,也让人们认识到网络安全的重要性。企业、社会、国家机构在日常经营管理中,由于业务和数据的保密和安全需求,需要对不同的网络环境......
  • uniapp数据缓存和发起网络请求
    数据缓存uni.onStorageSync同步的方式将数据存储到本地缓存<template> <button@click="onStorageSync()">存储数据</button></template><scriptsetup> constonStorageSync=()=>{ //存储数据 uni.setStorageSync('username',&......