脚本之家 服务器常用软件
快捷导航
您的位置：首页 → 数据库 → Redis → Redis BigKey问题

Redis缓存使用的BigKey问题解决

 更新时间：2025年05月26日 10:01:49   作者：王军新  
BigKey在Redis中存储的单个Key对应的Value过大,本文主要介绍了Redis缓存使用的BigKey问题解决,具有一定的参考价值,感兴趣的可以了解一下

一、什么是 BigKey？

BigKey 指在 Redis 中存储的 单个 Key 对应的 Value 过大，通常表现为：

  • String 类型：Value 长度 > 10KB。
  • Hash/List/Set/ZSet：元素数量 > 5,000 或总大小 > 10MB。

二、BigKey 的危害

问题影响
内存不均导致集群节点内存倾斜，可能触发 OOM。
阻塞请求单线程模型下，操作 BigKey 耗时高，阻塞其他命令（如 DEL 大 Key 卡顿）。
网络拥塞大 Value 传输占用带宽，影响其他请求延迟。
持久化故障AOF/RDB 保存大 Key 时耗时剧增，甚至失败。

三、如何发现 BigKey？

1. 使用 Redis 内置命令 redis-cli --bigkeys

# 扫描 BigKey（Redis 4.0+）
redis-cli --bigkeys

# 输出示例（汇总每种数据类型的最大 Key）
[00.00%] Biggest string found so far 'user' with 10240 bytes
[00.00%] Biggest hash   found so far 'product' with 5000 fields

缺点：只能返回每种类型的最大 Key，无法全面扫描。

2. 使用 Redis 内置命令 MEMORY USAGE

# 查看指定 Key 的内存占用（Redis 4.0+）
MEMORY USAGE user

缺点：只能返回指定Key的信息。

3. 使用 Redis 内置命令 DEBUG OBJECT

# 查看指定 Key 信息
DEBUG OBJECT user

缺点：只能返回指定Key的信息。

4. 使用 Redis 内置命令 SCAN + MEMORY USAGE 或 DEBUG OBJECT

使用sacn 命令扫描redis 中的key，结合 memory usage 或 debug object 判断key 值大小

SCAN 0 MATCH order:* COUNT 100 
HSCAN user:1000 0  # 遍历 Hash 的字段
SSCAN followers 0  # 遍历 Set 的成员
ZSCAN rankings 0   # 遍历 ZSet 的成员和分数

可循环定时执行scan命令遍历出bigKey

5. 使用第三方工具

rdb-tools：分析 RDB 文件，统计大 Key。

pip install rdbtools
rdb --command memory dump.rdb --bytes 10240 --type string

RedisInsight：图形化工具直观查看内存分布。

四、BigKey 的解决方案

1. 拆分大 Key

String 类型：拆分为多个子 Key。

# 原始 Key
SET user:1000:profile "超大JSON数据..."
# 拆分为
SET user:1000:profile:part1 "JSON片段1"
SET user:1000:profile:part2 "JSON片段2"

Hash/List/Set/ZSet：按字段或范围分片。

# 原始 Hash
HSET product:999:details name "手机" price 5000 ... (5000个字段)
# 拆分为
HSET product:999:details:1 name "手机" price 5000
HSET product:999:details:2 field1001 "value1001" ...

2. 使用合适的数据结构

替代方案：

场景错误用法优化方案
存储用户标签SET 存储 JSON 列表改用 SET 或 ZSET
频繁更新的计数器String + INCR改用 HASH 分片存储

3. 客户端缓存

  • 对热点 BigKey 使用本地缓存（如 Caffeine），减少 Redis 访问。

到此这篇关于Redis缓存使用的BigKey问题解决的文章就介绍到这了,更多相关Redis BigKey问题内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！ 

您可能感兴趣的文章:

相关文章

  • Redis 中ZSET数据类型命令使用及对应场景总结(案例详解)

    Redis 中ZSET数据类型命令使用及对应场景总结(案例详解)

    这篇文章主要介绍了Redis 中ZSET数据类型命令使用及对应场景总结,本文通过示例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下
    2023-01-01
  • Redis的键String全面详解

    Redis的键String全面详解

    这篇文章主要为大家介绍了Redis的键String全面详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪
    2023-06-06
  • Redis 的查询很快的原因解析及Redis 如何保证查询的高效

    Redis 的查询很快的原因解析及Redis 如何保证查询的高效

    由于redis是内存数据库，归功于它的数据结构所以查询效率非常高，今天通过本文给大家介绍下Redis 的查询很快的原因解析及Redis 如何保证查询的高效，感兴趣的朋友一起看看吧
    2022-03-03
  • k8s部署redis哨兵的实现

    k8s部署redis哨兵的实现

    本文主要介绍了k8s部署redis哨兵的实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
    2022-07-07
  • Redis入门教程详解

    Redis入门教程详解

    本文详细介绍了Redis，文中主要讲解了其基本数据结构、高级数据结构、高级特性、使用场景等，需要了解的朋友可以参考一下
    2021-08-08
  • SpringSession通过Redis统计在线用户数量的实现代码

    SpringSession通过Redis统计在线用户数量的实现代码

    这篇文章主要介绍了SpringSession通过Redis统计在线用户数量,本文通过实例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下
    2023-04-04
  • 如何操作Redis和zookeeper实现分布式锁

    如何操作Redis和zookeeper实现分布式锁

    这篇文章主要介绍了如何操作Redis和zookeeper实现分布式锁的相关资料,需要的朋友可以参考下
    2017-07-07
  • Redis主从集群切换数据丢失的解决方案

    Redis主从集群切换数据丢失的解决方案

    这篇文章主要介绍了Redis主从集群切换数据丢失的解决方案，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
    2021-04-04
  • Redis与本地缓存的结合实现

    Redis与本地缓存的结合实现

    我们开发中经常用到Redis作为缓存，本文主要介绍了Redis与本地缓存的结合实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
    2022-07-07
  • redis-cli -p 6379 info命令详解

    redis-cli -p 6379 info命令详解

    这篇文章主要介绍了redis-cli -p 6379 info命令详解，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
    2020-12-12

最新评论