目录

  • 一、缓存是什么?
  • 二、缓存的作用和成本
    • 1、缓存的作用:
    • 2、缓存的成本:
  • 三、缓存作用模型
    • 1、根据id查询数据缓存流程
  • 四、缓存更新策略
    • 1、内存淘汰
    • 2、超时剔除
    • 3、主动更新
  • 五、缓存穿透
    • 解决方法:
  • 六、缓存雪崩
  • 七、缓存击穿
    • 1、通过互斥锁解决缓存击穿
    • 2、根据id查询商品信息,基于互斥锁解决缓存击穿问题
    • 3、通过逻辑过期解决缓存击穿
  • 八、Redis工具类

一、缓存是什么?

缓存就是数据交换的缓存区,是存储数据的地方,一般读写性能较高。

二、缓存的作用和成本

1、缓存的作用:

  1. 降低后端负载
  2. 提高读写效率,降低响应时间

2、缓存的成本:

  1. 数据一致性成本
  2. 代码维护成本
  3. 运维成本

三、缓存作用模型

1、根据id查询数据缓存流程

四、缓存更新策略

1、内存淘汰

Redis的内存淘汰机制,当内存不足时自动淘汰部分数据,下次查询时更新缓存。

2、超时剔除

当缓存数据设置TTL时间,到期后自动删除缓存,下次查询时更新缓存。

3、主动更新

编写业务逻辑,在修改数据库的同时,更新缓存。

五、缓存穿透

缓存穿透是指客户端请求的数据在Redis和数据库中都不存在,这样就无法进行缓存,这些请求都会打到数据库。

解决方法:

1、缓存空对象

对不存在的数据也在Redis中建立缓存,值为空,并设置一个较短的TTL时间。

  • 优点:实现简单,维护方便;
  • 缺点:额外的内存消耗,可能造成短期的数据不一致;

2、布隆过滤器

利用布隆过滤算法,在请求进入Redis之前,先判断是否存在,如果不存在则直接拒绝访问。

  • 优点:内存占用小
  • 缺点:① 实现复杂;② 存在误判的可能;

六、缓存雪崩

缓存雪崩是指同一时间段大量的缓存key同时失效或者Redis服务宕机,导致大量请求打到数据库,带来巨大压力。

解决方式:

  1. 给不同的key的TTL添加随机值;
  2. 利用Redis集群提高服务的可用性;
  3. 给缓存添加降级限流策略;
  4. 给业务添加多级缓存;

七、缓存击穿

缓存击穿也叫热点key问题,就是一个被高并发访问并且缓存重建业务较复杂的key失效了,无数的请求访问会在瞬间打到数据库,带来巨大压力。

1、通过互斥锁解决缓存击穿

给缓存重建过程加锁,确保重建过程只有一个线程执行,其它线程等待。

互斥锁的最大问题是,线程等待问题,性能较差。

2、根据id查询商品信息,基于互斥锁解决缓存击穿问题

3、通过逻辑过期解决缓存击穿

逻辑过期的优点是性能好,缺点是不保证一致性,有额外的内存消耗,实现复杂。

八、Redis工具类

// 解决缓存穿透
Goods goods = cacheClient.queryWithPassThrough(CACHE_GOODS_KEY, id, Goods.class, this::getById, CACHE_GOODS_TTL, TimeUnit.MINUTES);// 互斥锁解决缓存击穿
Goods goods = cacheClient.queryWithMutex(CACHE_GOODS_KEY, id, Goods.class, this::getById, CACHE_GOODS_TTL, TimeUnit.MINUTES);// 逻辑过期解决缓存击穿
Goods goods = cacheClient.queryWithLogicalExpire(CACHE_GOODS_KEY, id, Goods.class, this::getById, 20L, TimeUnit.SECONDS);
package com.guor.utils;import cn.hutool.core.util.BooleanUtil;
import cn.hutool.core.util.StrUtil;
import cn.hutool.json.JSONObject;
import cn.hutool.json.JSONUtil;
import lombok.extern.slf4j.Slf4j;
import org.springframework.data.redis.core.StringRedisTemplate;
import org.springframework.stereotype.Component;import java.time.LocalDateTime;
import java.util.concurrent.ExecutorService;
import java.util.concurrent.Executors;
import java.util.concurrent.TimeUnit;
import java.util.function.Function;@Slf4j
@Component
public class CacheClient {private final StringRedisTemplate stringRedisTemplate;private static final ExecutorService CACHE_REBUILD_EXECUTOR = Executors.newFixedThreadPool(10);public CacheClient(StringRedisTemplate stringRedisTemplate) {this.stringRedisTemplate = stringRedisTemplate;}public void set(String key, Object value, Long time, TimeUnit unit) {stringRedisTemplate.opsForValue().set(key, JSONUtil.toJsonStr(value), time, unit);}public void setWithLogicalExpire(String key, Object value, Long time, TimeUnit unit) {// 设置逻辑过期RedisData redisData = new RedisData();redisData.setData(value);redisData.setExpireTime(LocalDateTime.now().plusSeconds(unit.toSeconds(time)));// 写入RedisstringRedisTemplate.opsForValue().set(key, JSONUtil.toJsonStr(redisData));}public <R,ID> R queryWithPassThrough(String keyPrefix, ID id, Class<R> type, Function<ID, R> dbFallback, Long time, TimeUnit unit){String key = keyPrefix + id;// 1.从redis查询商铺缓存String json = stringRedisTemplate.opsForValue().get(key);// 2.判断是否存在if (StrUtil.isNotBlank(json)) {// 3.存在,直接返回return JSONUtil.toBean(json, type);}// 判断命中的是否是空值if (json != null) {// 返回一个错误信息return null;}// 4.不存在,根据id查询数据库R r = dbFallback.apply(id);// 5.不存在,返回错误if (r == null) {// 将空值写入redisstringRedisTemplate.opsForValue().set(key, "", RedisConfig.CACHE_NULL_TTL, TimeUnit.MINUTES);// 返回错误信息return null;}// 6.存在,写入redisthis.set(key, r, time, unit);return r;}public <R, ID> R queryWithLogicalExpire(String keyPrefix, ID id, Class<R> type, Function<ID, R> dbFallback, Long time, TimeUnit unit) {String key = keyPrefix + id;// 1.从redis查询商铺缓存String json = stringRedisTemplate.opsForValue().get(key);// 2.判断是否存在if (StrUtil.isBlank(json)) {// 3.存在,直接返回return null;}// 4.命中,需要先把json反序列化为对象RedisData redisData = JSONUtil.toBean(json, RedisData.class);R r = JSONUtil.toBean((JSONObject) redisData.getData(), type);LocalDateTime expireTime = redisData.getExpireTime();// 5.判断是否过期if(expireTime.isAfter(LocalDateTime.now())) {// 5.1.未过期,直接返回店铺信息return r;}// 5.2.已过期,需要缓存重建// 6.缓存重建// 6.1.获取互斥锁String lockKey = RedisConfig.LOCK_GOODS_KEY + id;boolean isLock = tryLock(lockKey);// 6.2.判断是否获取锁成功if (isLock){// 6.3.成功,开启独立线程,实现缓存重建CACHE_REBUILD_EXECUTOR.submit(() -> {try {// 查询数据库R newR = dbFallback.apply(id);// 重建缓存this.setWithLogicalExpire(key, newR, time, unit);} catch (Exception e) {throw new RuntimeException(e);}finally {// 释放锁unlock(lockKey);}});}// 6.4.返回过期的商铺信息return r;}public <R, ID> R queryWithMutex(String keyPrefix, ID id, Class<R> type, Function<ID, R> dbFallback, Long time, TimeUnit unit) {String key = keyPrefix + id;// 1.从redis查询商铺缓存String json = stringRedisTemplate.opsForValue().get(key);// 2.判断是否存在if (StrUtil.isNotBlank(json)) {// 3.存在,直接返回return JSONUtil.toBean(json, type);}// 判断命中的是否是空值if (json != null) {// 返回一个错误信息return null;}// 4.实现缓存重建// 4.1.获取互斥锁String lockKey = RedisConfig.LOCK_GOODS_KEY + id;R r = null;try {boolean isLock = tryLock(lockKey);// 4.2.判断是否获取成功if (!isLock) {// 4.3.获取锁失败,休眠并重试Thread.sleep(50);return queryWithMutex(keyPrefix, id, type, dbFallback, time, unit);}// 4.4.获取锁成功,根据id查询数据库r = dbFallback.apply(id);// 5.不存在,返回错误if (r == null) {// 将空值写入redisstringRedisTemplate.opsForValue().set(key, "", RedisConfig.CACHE_NULL_TTL, TimeUnit.MINUTES);// 返回错误信息return null;}// 6.存在,写入redisthis.set(key, r, time, unit);} catch (InterruptedException e) {throw new RuntimeException(e);}finally {// 7.释放锁unlock(lockKey);}// 8.返回return r;}private boolean tryLock(String key) {Boolean flag = stringRedisTemplate.opsForValue().setIfAbsent(key, "1", 10, TimeUnit.SECONDS);return BooleanUtil.isTrue(flag);}private void unlock(String key) {stringRedisTemplate.delete(key);}
}

图解Redis缓存穿透、击穿、雪崩(必须知道)相关推荐

  1. Redis缓存穿透击穿雪崩

    目录 1.缓存穿透 2.缓存击穿 3.缓存雪崩 1.缓存穿透 概述: 缓存穿透的概念很简单,用户想要査询一个数据,发现redis内存数据库没有,也就是缓存没有命中,于是向持久层数据库査询.发现也数据库 ...

  2. Redis缓存/穿透/击穿/雪崩

    目录 1 缓存穿透 1.1 问题描述 1.2 产生原因 1.3 解决方案 2 缓存击穿 2.1 问题描述 2.2 解决方案 3 缓存雪崩 3.1 问题描述 3.2 解决方案: 1 缓存穿透 1.1 问 ...

  3. 一文搞懂Redis缓存穿透/击穿/雪崩

    缓存穿透 问题描述 缓存穿透是指查询一个一定不存在的数据,由于缓存时不命中的,则需要从数据库中查询.查不到数据则不写入缓存,这将导致这个不存在的数据每次请求都要到数据库中去查询,进而增大了数据库的压力 ...

  4. 二十七、Redis缓存穿透和雪崩(完)

    Redis缓存穿透和雪崩 一.服务的高可用问题 在这里我们不会详细的区分析解决方案的底层! Redis缓存的使用,极大的提升了应用程序的性能和效率,特别是数据查询方面.但同时,它也带来了一些问题.其中 ...

  5. 21_Redis_浅析Redis缓存穿透和雪崩

    为什么了解缓存穿透和雪崩:保证服务的高可用问题 Redis缓存的使用,极大的提升了应用程序的性能和效率,特别是数据查询方面.但同时,它也带来了一些问题.其中,最要害的问题,就是数据的一致性问题,从严格 ...

  6. Redis 缓存穿透、雪崩、缓存数据库不一致、持久化方式、分布式锁、过期策略

    1. Redis 缓存穿透 1.1 Redis 缓存穿透概念 访问了不存在的 key,缓存未命中,请求会穿透到 DB,量大时可能会对 DB 造成压力导致服务异常. 由于不恰当的业务功能实现,或者外部恶 ...

  7. Redis缓存穿透击穿和雪崩(八)

    1. 缓存穿透 1.1. 定义 如果用户的请求Redis缓存没有,mysql持久层也没有这个数据,于是本地查询失败.当用户请求很多(或者恶意攻击)且都是这种缓存和持久层都没有命中的情况时,大量的请求持 ...

  8. 一篇吃透Redis缓存穿透、雪崩、击穿问题

    前言:在学Redis之前我们查询数据的时候都是直接查询数据库的,但是这样会有一个潜在的问题:"如果用户量很大,所有请求都去访问数据库,那么会使数据库压力过大,导致性能下降甚至宕机" ...

  9. Redis -- 缓存穿透和雪崩

    文章目录 一.缓存穿透 1.1 概念 1.2 解决方案 1.3 布隆过滤器的工作原理 二.缓存击穿 2.1 概念 2.2 解决方案 三.缓存雪崩 3.1 概念 3.2 解决方案 用户的数据一般是存储于 ...

最新文章

  1. 2022-2028年中国干电池制造行业产销需求与投资预测分析报告
  2. vs 2010 下使用VLD工具
  3. mac实际上是非常适合编程的,我之前的认识的确是有些有限的
  4. sql注入pythonpoco_.NET EF(Entity Framework)详解
  5. 基于Nokia S60的游戏开发之一
  6. mui点击添加类名_Mui使用jquery并且使用点击跳转新窗口的实例
  7. Hibernate反射DAO模式
  8. 计算机组成原理——第八章
  9. 小米max刷鸿蒙,用了小米Max2,这简直是浪费我一天一夜的时间!
  10. WinMTR-路由追踪软件
  11. Linux使用.pem文件实现免密登录
  12. python编程输入法_用Python写一个拼音输入法
  13. Windows Server 2019 Datacenter OVF 模板 百度网盘 下载
  14. Python实现图片转pdf
  15. html静态网站基于游戏网站设计与实现共计10个页面 (仿地下城与勇士游戏网页)
  16. 树莓派linux led字符设备驱动(设备树)
  17. Java聊天室界面代码
  18. CSDN独家全网首发专栏 | 《目标检测YOLO改进指南》改进涨点推荐!
  19. Web与小程序AR技术原理
  20. Ubuntu换源操作+vim的下载

热门文章

  1. 统信UOS手动更新系统时备份失败,如何用命令自动更新系统
  2. ETCD 十六 服务注册与发现
  3. 世界首个链上AI画展:《爱丽丝和算力之镜》加密艺术展即将开幕
  4. 基于MATLAB的视频运动目标跟踪与检测定位系统
  5. koa2开发微信公众号: 不定期推送最新币圈消息
  6. 券商股票交易接口有什么用?源代码怎么写?
  7. [四旋翼无人机PID仿真(一)
  8. vnc远程控制使用,vnc远程控制怎么使用?使用教程
  9. mqtt 传文件断开连接的原因_MQTT——取消订阅报文和断开连接报文
  10. 电脑上装蓝牙_卡带录音机复活了!体验百聆双响炮蓝牙音箱