[Redis]——缓存击穿和缓存穿透及解决方案(图解+代码+解释)

缓存击穿:

解释:

缓存击穿是指缓存中没有但数据库中有的数据(如缓存服务器宕机或缓存过期),这时由于并发用户特别多,同时访问这个数据,导致所有的请求都到达数据库,造成数据库压力过大,甚至宕机。

解决方案:

  1. 设置热点数据永不过期。
  2. 使用互斥锁,保证同时只有一个请求去数据库查询数据,其他请求等待。
  3. 提前预热数据,保证热点数据在缓存中。

缓存穿透:

解释:

缓存穿透是指查询不存在的数据,缓存中和数据库中都没有,这样会导致用户请求直接打到数据库,造成数据库压力过大。

解决方案:

  1. 使用布隆过滤器,它可以检查一个元素是否在一个集合中。如果不在,直接返回,不查询数据库。
  2. 对于查询不到的数据,也可以在缓存中存储一个空值或默认值,并设置一个较短的过期时间。
  3. 使用互斥锁,同上述缓存击穿。

代码示例(伪代码):




# 缓存击穿:使用互斥锁
def get_data(data_id):
    # 尝试从缓存获取数据
    data = cache.get(data_id)
    if data is not None:
        return data
    
    # 加锁,避免并发请求到数据库
    with cache.lock(data_id):
        # 再次检查缓存,防止缓存服务器宕机等情况
        data = cache.get(data_id)
        if data is None:
            # 缓存中没有数据,从数据库加载
            data = db.get(data_id)
            if data is not None:
                # 设置热点数据永不过期
                cache.set(data_id, data, ttl=None if is_hot_data else 3600)
        return data if data is not None else None
 
# 缓存穿透:使用布隆过滤器
from some_bloom_filter_library import BloomFilter
bf = BloomFilter(size=1000000, error_rate=0.001)
 
def get_data(data_id):
    # 使用布隆过滤器检查数据是否存在
    if not bf.might_contain(data_id):
        return None
    
    # 尝试从缓存获取数据
    data = cache.get(data_id)
    if data is not None:
        return data
    
    # 数据库中也没有,返回默认值或空值,并设置短暂过期时间
    data = db.get(data_id)
    if data is None:
        cache.set(data_id, None, ttl=5)
    else:
        cache.set(data_id, data, ttl=3600)
    return data if data is not None else None
 
# 初始化时,将所有数据ID添加到布隆过滤器中
for data_id in db.get_all_data_ids():
    bf.add(data_id)

以上代码示例展示了缓存击穿和穿透的基本解决方案,具体实现可能需要根据实际应用场景和技术栈进行调整。

最后修改于:2024年08月30日 08:33

评论已关闭

推荐阅读

DDPG 模型解析,附Pytorch完整代码
2024年11月24日
DQN 模型解析,附Pytorch完整代码
2024年11月24日
AIGC实战——Transformer模型
2024年12月01日
Socket TCP 和 UDP 编程基础(Python)
2024年11月30日
python , tcp , udp
如何使用 ChatGPT 进行学术润色?你需要这些指令
2024年12月01日
AI
最新 Python 调用 OpenAi 详细教程实现问答、图像合成、图像理解、语音合成、语音识别(详细教程)
2024年11月24日
ChatGPT 和 DALL·E 2 配合生成故事绘本
2024年12月01日
omegaconf,一个超强的 Python 库!
2024年11月24日
【视觉AIGC识别】误差特征、人脸伪造检测、其他类型假图检测
2024年12月01日
[超级详细]如何在深度学习训练模型过程中使用 GPU 加速
2024年11月29日
Python 物理引擎pymunk最完整教程
2024年11月27日
MediaPipe 人体姿态与手指关键点检测教程
2024年11月27日
深入了解 Taipy:Python 打造 Web 应用的全面教程
2024年11月26日
基于Transformer的时间序列预测模型
2024年11月25日
Python在金融大数据分析中的AI应用(股价分析、量化交易)实战
2024年11月25日
AIGC Gradio系列学习教程之Components
2024年12月01日
Python3 `asyncio` — 异步 I/O,事件循环和并发工具
2024年11月30日
llama-factory SFT系列教程:大模型在自定义数据集 LoRA 训练与部署
2024年12月01日
Python 多线程和多进程用法
2024年11月24日
Python socket详解,全网最全教程
2024年11月27日