Redis 大 Key 排查与治理实践:从定位到预防
使用 Redis 时,大 key 是最常见的性能杀手之一:单个 key 占用内存过大、读写耗时长,会导致实例延迟毛刺、内存使用率异常,甚至引发客户端超时。本文结合排查实践,总结一套从定位、治理到预防的完整方法。
一、什么是大 key
Redis 并没有官方的严格定义,实践中通常认为:string 类型 value 超过 10KB,或 hash、list、set、zset 的元素数量超过 5000 的 key,就值得警惕。超过这个量级的 key,在读写、删除、迁移时都可能阻塞主线程。
二、排查定位
1. redis-cli --bigkeys
自带抽样扫描命令,会遍历全库按类型输出最大的 key。注意它会给实例增加负载,生产实例建议放在业务低峰执行,或在从节点、备节点执行。
2. 慢日志 SLOWLOG GET
大 key 常伴随慢命令,例如对大 hash 执行 HGETALL、对大 set 执行 SMEMBERS、对大 zset 执行 ZRANGE 全量返回。先看慢日志里反复出现的命令,再顺藤摸瓜找到对应的 key。
3. MEMORY USAGE key
对可疑 key 逐个查看内存占用,精确量化。DEBUG OBJECT 也可以查看,但生产环境慎用。
4. 云控制台的大 key 分析
以华为云 DCS for Redis 为例,控制台提供大 key 分析和慢查询统计,可以直接查看 Top 大 key 和慢日志,还能配置监控告警,比手动扫描更省事。
5. RDB 离线分析
用 redis-rdb-tools 等工具解析 RDB 文件做离线统计,完全不影响线上性能,适合定期巡检。
三、治理手段
1. 拆分:大 hash、list、set 按业务维度拆成多个小 key;大 string 考虑分片存储。
2. 避免全量操作:业务代码里把 HGETALL、SMEMBERS、KEYS * 这类命令换成 HSCAN、SSCAN 分批迭代。
3. 合理过期:设置合理的过期时间,避免 key 无限增长;value 能压缩就压缩。
4. 异步删除:删除大 key 用 UNLINK(异步删除)而不是 DEL,避免主线程长时间阻塞。
四、预防
1. 上线前在测试环境跑一遍 --bigkeys,把大 key 拦截在上线前。
2. 给实例配置内存使用率告警和大 key 监控,出现苗头就处理,别等延迟报警了再救火。
3. 把“禁止全量扫描类命令”写进团队的 Redis 使用规范,配合代码评审落地。
总结:大 key 问题的核心是“早发现、早治理”。排查手段有很多,关键是建立常态化的监控和规范,才能从根本上避免大 key 拖慢业务。
- 点赞
- 收藏
- 关注作者
评论(0)