redis大key处理

比眉伴天荒 2022-11-21 01:27 154阅读 0赞

redis 中的大key 主要包括以下几个部分(超过M级别的):

1.  单个简单的key存储的value很大
2.  hash， set，zset，list 中存储过多的元素
3.  一个集群存储了上亿的key

### **定位大key** ###

查询大key问题查看第一篇文章，有很多方法定位到大key去优化；

1.  **redis-rdb-tools工具** 使用redis自带的工具，导出rdb文件，文件中可以查看具体的key类型，大小等信息；
2.  **redis-cli --bigkeys命令**使用redis-cli -p 6379 --bigkeys 来进行对整个redis扫描，在线操作；
3.  **Redis 4.0之后的大key的发现与删除方法**
    
     *  memory usage
     *  lazyfree机制
4.  具体信息请看第一篇文章

### **解决大key** ###

具体怎么去优化逻辑，可以参考第二篇文章的操作，根据hash值去去key，判断落到哪一个key上，以此来达到拆分大key的方法；

如果是String 类型的，可以考虑改造成list，hash，set等类型，可以根据hash的方法拆分key值落散落到不同的key上去存；

### **参考** ###

**1.** [**如何解决Redis大key问题，看这一篇就够了!**][Redis_key]

**2.** [**Redis—大key问题讨论及解决方案**][Redis_key 1]

**3.** [**Redis大Key优化**][Redis_Key]

### **题外话** ###

\[之前做的优化促销逻辑，使用了zset去实时缓存门店商品数据，然后捞取db刷新逻辑到redis缓存，这里的zset其实数据量就挺大的，可以考虑直接根据门店去hash，落到不同的zset上，这里就可以读取不同的zset达到分门店去处理逻辑\]

[Redis_key]: https://www.jianshu.com/p/50c0894c0a19
[Redis_key 1]: https://blog.csdn.net/zhulj625/article/details/106695714
[Redis_Key]: https://blog.csdn.net/lavorange/article/details/83475960

发表评论取消回复

表情：

评论列表（有 0 条评论，154人围观）

还没有评论，来说两句吧...

相关阅读

相关 Redis大key与热Key

什么是 bigkey？简单来说，如果一个 key 对应的 value 所占用的内存比较大，那这个 key 就可以看作是 bigkey。具体多大才算大呢？有一个不是特别精确

桃扇骨/ 2024年02月17日 09:43/ 0 赞/ 48 阅读

相关 Redis 大 key 问题要如何处理？

今天来聊聊，关于 Redis 大 key 的四个问题。什么是 Redis 大 key？大 key 会造成什么问题？如何找到大 key ？如何删

爱被打了一巴掌/ 2023年10月16日 18:00/ 0 赞/ 1 阅读

相关 redis的热key、大key

目录 1.概述 2.查找方法 2.1.知道具体哪个key有问题 2.2.不知道具体哪个key有问题 3.处理方法 3.1.大key的处理方法 3.2.热key的处

忘是亡心i/ 2023年09月23日 18:07/ 0 赞/ 148 阅读

相关 Redis 知识点 scan和keys 定位大key

在Redis中，查找特定条件的Key和定位大Key `keys ` > 注意： > > keys 算法是遍历算法，复杂度是 O(n) > > 没有 offset

小鱼儿/ 2022年12月28日 01:52/ 0 赞/ 263 阅读

相关 redis大key处理

redis 中的大key 主要包括以下几个部分(超过M级别的): 1. 单个简单的key存储的value很大 2. hash， set，zset，list 中存储过多的元

比眉伴天荒/ 2022年11月21日 01:27/ 0 赞/ 155 阅读

相关 redis-大key寻找

[redis-大key寻找][redis-_key] 使用redis-rdb-tools 项目地址 https://github.com/sripathikris

短命女/ 2022年10月02日 15:50/ 0 赞/ 145 阅读

相关阿里云redis大key搜索工具

[https://yq.aliyun.com/articles/117042][https_yq.aliyun.com_articles_117042] Redis提供了li

骑猪看日落/ 2022年04月22日 14:04/ 0 赞/ 143 阅读

相关 Redis大Key分拆方案

业务场景中经常会有各种大key的情况，比如： 1. 单个简单的key存储的value很大 2. hash、set、zset、list中存储过多的元素（以万为单位）

本是古典何须时尚/ 2022年03月18日 13:52/ 0 赞/ 667 阅读

相关 Redis中查找大key

首发于 [https://segmentfault.com/a/11...][https_segmentfault.com_a_11...] redis-cli提供的方法

清疚/ 2022年03月07日 07:06/ 0 赞/ 361 阅读

相关 redis bigkey 解决删除大key

大Key会带来的问题 1. 如果是集群模式下，无法做到负载均衡，导致请求倾斜到某个实例上，而这个实例的QPS会比较大，内存占用也较多；对于Redis单线程模型又容易出现CP

旧城等待，/ 2022年02月20日 04:39/ 0 赞/ 218 阅读