分布式缓存与Redis
创始人
2024-11-17 19:32:33
0

缓存定义与意义

  • 狭义缓存:加速CPU数据交换的存储器。
  • 广义缓存:所有用于数据高速交换的存储介质,包括硬件和软件。
  • 缓存目的:通过数据交换缓冲区减少原始数据获取代价,提高读写性能。

缓存思想与性能

  • 时间局限性原理:数据一旦被获取,未来可能被多次引用。
  • 以空间换时间:使用高速独立空间来提供数据的高效访问。
  • 性能成本权衡:访问延迟越低,性能越高,成本也越大。

缓存的优势与代价

  • 优势
    • 提升访问性能。
    • 降低网络拥堵。
    • 减轻服务负载。
    • 增强可扩展性。
  • 代价
    • 增加系统复杂度。
    • 增加部署和运行成本。
    • 存在数据一致性问题。

缓存读写模式

  1. Cache Aside(旁路缓存)
    • 写操作:更新数据库后删除缓存中的key。
    • 读操作:先读缓存,未命中则读数据库并回写缓存。
  2. Read/Write Through(读写穿透)
    • 业务应用通过存储服务与缓存和数据库交互。
    • 存储服务代理处理缓存和数据库的读写操作。
  3. Write Behind Caching(异步缓存写入)
    • 先更新缓存,异步批量更新数据库。
    • 写性能高,但可能数据一致性差,存在数据丢失风险。

缓存问题解决方案

  1. 缓存穿透
    • 频繁查询不存在的数据。
    • 解决方案:接口校验、缓存空对象、布隆过滤器。
  2. 缓存击穿
    • 热点Key过期导致大量请求访问数据库。
    • 解决方案:永不过期、逻辑过期、使用互斥锁。
  3. 缓存雪崩
    • 大量缓存key同时失效或服务宕机。
    • 解决方案:随机过期时间、集群部署、多级缓存、降级限流。

缓存数据不一致和并发竞争

  • 数据不一致
    • 原因:更新数据库后缓存更新失败。
    • 解决方案:重试更新、使用队列服务、缓存分层策略。
  • 数据并发竞争
    • 原因:缓存miss导致大量请求并发查询数据库。
    • 解决方案:全局锁、多个缓存备份。

Hot Key和Big Key问题

  • Hot Key
    • 原因:突发热门事件导致大量请求。
    • 解决方案:识别热key、分散缓存节点、多副本架构、监控SLA、本地缓存。
  • Big Key
    • 原因:缓存Value过大导致读写超时。
    • 解决方案:启用压缩、预先分配足够空间、序列化构建、分拆大key。

Redis网络模型

  • 用户空间与内核空间
    • 用户空间通过内核接口访问资源。
    • 内核空间直接调用系统资源。
  • Linux缓冲区
    • 用户空间和内核空间都加入缓冲区提高IO效率。
  • 网络模型
    • 阻塞IO:两个阶段都阻塞。
    • 非阻塞IO:第一阶段不阻塞,第二阶段阻塞。
    • IO多路复用:单个线程监听多个FD。
    • 信号驱动IO:通过信号通知用户进程FD就绪。
    • 异步IO:内核完成数据处理后写入用户态。

Redis多线程支持

  • Redis v4.0:引入多线程处理耗时任务。
  • Redis v6.0:在核心网络模型中引入多线程。

缓存设计架构考量点

  • 读写方式:整体读写或部分读写。
  • KV size:根据业务数据大小分拆或合并KV。
  • key数量:全量数据或只保留热数据。
  • 读写峰值:独立Cache池或分层处理。
  • 命中率:持续监控和故障处理。
  • 过期策略:设置合理过期时间或使用时间戳。

相关内容

热门资讯

五分钟了解(新友麻将)外挂透明... 五分钟了解(新友麻将)外挂透明挂辅助安装(透视)AI教程(2021已更新)(哔哩哔哩);是一款可以让...
第1分钟了解“789大菠萝可以... 第1分钟了解“789大菠萝可以控制吗”详细透视开挂辅助安装-哔哩哔哩;1.789大菠萝可以控制吗 a...
第5分钟发现!wepoker私... 第5分钟发现!wepoker私人局俱乐部,wepoker透视脚本,插件教程(果真有挂)-哔哩哔哩一、...
第5分钟了解“新道游透视脚本免... 第5分钟了解“新道游透视脚本免费下载”详细透视开挂辅助挂-哔哩哔哩;新道游透视脚本免费下载简单的灵活...
第一分钟了解(德扑机器人)外挂... 您好:德扑机器人这款游戏可以开挂的,确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特别好...
第8分钟领会!德州透视脚本,a... 第8分钟领会!德州透视脚本,aapoker辅助包,玩家教你(真的有挂)-哔哩哔哩1、德州透视脚本系统...
七分钟了解“科乐天天踢填大坑游... 七分钟了解“科乐天天踢填大坑游戏攻略”详细透视开挂辅助工具-哔哩哔哩;1、这是跨平台的科乐天天踢填大...
第8分钟了解(wepoKE)外... 第8分钟了解(wepoKE)外挂透明挂辅助下载(透视)必备教程(2020已更新)(哔哩哔哩);1、很...
第八分钟精通!hhpoker脚... 第八分钟精通!hhpoker脚本,约局吧德州真的有透视挂吗,技巧教程(有挂教程)-哔哩哔哩运约局吧德...
9分钟了解“牛总管辅助方法”详... 9分钟了解“牛总管辅助方法”详细透视开挂辅助下载-哔哩哔哩;牛总管辅助方法软件透明挂是一个全新上线的...