Redis 的热 Key问题是指Key 在短时间内被极高频率访问
一、热 Key 问题的核心危害
性能瓶颈:Redis 单线程模型下,热 Key 的密集请求会阻塞其他操作,导致整体延迟飙升。
缓存击穿:热 Key 过期瞬间,大量请求直接穿透到数据库,可能引发雪崩效应。
节点故障:流量集中可能打满网卡带宽或 CPU,导致 Redis 节点宕机。
集群倾斜:在集群模式下,热 Key 所在分片负载过高,其他分片闲置,资源利用率失衡。
二、如何识别热 Key?
监控工具
Redis 命令:
redis-cli –hotkeys(Redis 4.0+,需启用 LFU 淘汰策略)。
MONITOR + 日志分析(仅限临时排查,影响性能)。
SLOWLOG 捕捉慢查询中的高频 Key。
代理层/中间件:通过 Proxy(如 Twemproxy)或 DaaS 平台收集访问统计,无业务侵入。
云服务:阿里云、腾讯云等提供热 Key 实时分析功能
业务侧上报
在客户端或 SDK 嵌入统计逻辑,异步上报 Key 访问频率
三、解决方案:从架构设计到应急处理
本地缓存(二级缓存)
适用场景:数据变更不频繁(如商品描述、配置信息)。
实现方式:
使用 Guava、Caffeine 等本地缓存库,将热 Key 缓存到应用内存。
设置短过期时间(如 1-10 秒),避免数据不一致。
优点:减少 90%+ 的 Redis 请求,分散压力到应用节点。
缺点:需处理本地缓存更新(如通过 Pub/Sub 或消息队列同步)
数据分片与备份
分片(Sharding):
将热 Key 拆分为多个子 Key(如 hot_key:01、hot_key:02),分散到不同节点。
例:用户 ID 取模分片,不同用户访问不同子 Key。
备份(Replication):
在多个 Redis 节点复制同一热 Key(如 hot_key_copy1、hot_key_copy2)。
客户端随机访问副本,均衡负载。
一致性保障:通过 Redis Pub/Sub 或定时同步更新所有副本。
读写分离与集群扩展
读写分离:
主节点处理写请求,多个从节点分担读请求。
Redis Cluster:
自动分片数据,但需注意热 Key 仍可能集中在同一 Slot。
解决方案:通过 HASH_TAG 强制分散 Key
限流与降级
限流:
使用令牌桶或滑动窗口算法(如 Guava RateLimiter)限制热 Key 访问频率。
超限请求返回降级数据(如默认值、旧缓存)。
降级:
非核心业务直接返回静态数据,保障核心链路。
预热与异步更新
预热:在高峰期前主动加载热 Key 到缓存(如活动开始前 5 分钟)。
异步更新:
热 Key 更新通过消息队列(如 Kafka)异步处理,避免实时写压力。
四、架构级最佳实践
业务隔离:核心业务与非核心业务使用独立 Redis 集群,避免相互影响。
多级缓存体系:
本地缓存 → Redis → 数据库,层级拦截请求(例:Ehcache + Redis + MySQL)。
一致性哈希:结合 Proxy 层(如 Twemproxy)实现请求均匀分发。
业界方案参考:
有赞 TMC(透明多级缓存):自动探测热 Key 并下沉到本地缓存。
京东 hotkey 工具:实时监控 + 动态分片
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 如遇到加密压缩包,请使用WINRAR解压,如遇到无法解压的请联系管理员!
7. 本站有不少源码未能详细测试(解密),不能分辨部分源码是病毒还是误报,所以没有进行任何修改,大家使用前请进行甄别!
66源码网 » Redis 的热 Key问题是指Key 在短时间内被极高频率访问