缓存雪崩&缓存击穿&缓存穿透的本质

缓存雪崩&缓存击穿&缓存穿透的本质

缓存雪崩

什么是缓存雪崩?

大量请求无法在缓存中命中,请求达到数据库,导致数据库压力增加,进而引起存储服务故障,引起雪崩。

为什么会出现缓存雪崩?

请求中大量数据同时过期,导致大量请求无法命中。

怎么解决?

  1. 微调过期时间,避免给大量缓存项设置相同过期时间,可以采用增加随机过期时间,将大量数据过期时间分开。
  2. 设置多级缓存,针对于可能发生缓存雪崩的数据采用不同的多级缓存处理,如是核心数据,允许查询缓存,未命中则查询数据库;如查询的不是核心数据,暂停从缓存中查询,直接返回预定义的默认值。

另一种导致缓存雪崩的情况是,缓存实例故障宕机,导致无法处理请求,从而把大量请求打到数据库,增加数据库压力。

怎么解决?

  1. 业务服务中针对于读服务设置服务降级/熔断/限流机制,监控redis缓存所在机器的负载指标,如发现redis缓存实例宕机,数据库负载压力突然增加发生雪崩风险,则立即启动服务熔断机制,暂停业务系统对缓存对访问,但是有损的。
  2. 或者业务系统在服务入口进行请求限流。
  3. 事前进行容量规划,搭建redis集群,实现集群高可用。

缓存击穿

什么是缓存击穿?

指的是缓存中无法处理频繁的热点数据,导致大量请求打到数据库,造成数据库压力,和缓存穿透的区别在于这个是热点key。

为什么会出现缓存击穿?

热点数据且数据过期失效。

怎么解决?

  1. 因为缓存穿透是因为某个热点key既不在缓存中,也不再数据库中,这样的请求势必不能通过缓存分担qps压力,如果持续有这样的请求势必会给缓存实例和数据库带来压力。
  2. 出现此类问题的原因可能是业务层导致,比如一个正常的缓存key被在缓存和数据库误删除了,导致缓存和数据库都没有这个缓存key了。
  3. 或者是由于恶意攻击,某个不存在的key。
  4. 解决方式可以设置一个默认的返回值。
  5. 也可以采用布隆过滤器,判断查询数据是否存在,避免去数据库查询数据,从而减轻数据库压力。
  6. 最好的一种方式就是在业务层对请求参数的合法性进行校验。

一张图总结

www.zeeklog.com - 缓存雪崩&缓存击穿&缓存穿透的本质

Read more

超快速,使用ChatGPT编写回归和分类算法

超快速,使用ChatGPT编写回归和分类算法

本文将使用一些 ChatGPT 提示,这些提示对于数据科学家在工作时非常重要。 微信搜索关注《Python学研大本营》,加入读者群,分享更多精彩 以下是一些示例ChatGPT 提示的列表以及数据科学家的响应。 ChatGPT 提示 为决策树回归算法生成 python 代码。 下面是使用scikit-learn在 Python 中进行决策树回归的示例代码: import numpy as np import matplotlib.pyplot as plt from sklearn.tree import DecisionTreeRegressor # Generate random data rng = np.random.default_rng() x = 5 * rng.random(100) y = np.sin(x) + 0.

By Ne0inhk
力扣每日一题:993.二叉树的堂兄弟节点 深度优先算法

力扣每日一题:993.二叉树的堂兄弟节点 深度优先算法

993.二叉树的堂兄弟节点 难度:简单 题目: 在二叉树中,根节点位于深度 0 处,每个深度为 k 的节点的子节点位于深度 k+1 处。 如果二叉树的两个节点深度相同,但 父节点不同 ,则它们是一对堂兄弟节点。 我们给出了具有唯一值的二叉树的根节点 root ,以及树中两个不同节点的值 x 和 y 。 只有与值 x 和 y 对应的节点是堂兄弟节点时,才返回 true 。否则,返回 false。 示例: 示例 1: 输入:root = [1,2,3,4], x = 4, y = 3 输出:false

By Ne0inhk
1239.串联字符串的最大长度 关于字符串的回溯算法!

1239.串联字符串的最大长度 关于字符串的回溯算法!

题目: 给定一个字符串数组 arr,字符串 s 是将 arr 某一子序列字符串连接所得的字符串, 如果 s 中的每一个字符都只出现过一次,那么它就是一个可行解。 请返回所有可行解 s 中最长长度。 提示: 1 <= arr.length <= 16 1 <= arr[i].length <= 26 arr[i] 中只含有小写英文字母 示例: 示例 1: 输入:arr = ["un","iq","ue"] 输出:4 解释:所有可能的串联组合是

By Ne0inhk