一些Redis很实用的工作技巧

系统管理员 2023-10-07 21:26 44阅读 0赞

常用技术框架、开源中间件，系统架构、数据库、大公司架构案例、常用三方类库、项目管理、线上问题排查、个人成长、思考等知识

![f7d3ae9e661a4ed8bd88083685d3c4e8.jpeg][]

https://github.com/aalansehaiyang/technology-talk

活到老、学到老，用技术普惠世界

前言

### Redis 在当前的技术社区里是非常热门的。从来自 Antirez 一个小小的个人项目到成为内存数据存储行业的标准，Redis已经走过了很长的一段路。随之而来的一系列最佳实践，使得大多数人可以正确地使用 Redis。    ###

技巧经验

1、停止使用 KEYS \*

很多时候当我们想知道一个redis实例的统计数据，我们会快速地输入”KEYS \*”命令，所有key的信息会很快速展示出来

for key in'keys *':
      printf(key)

但是当你有上千万个key时，执行速度将会变慢。因为KEYS命令的时间复杂度是O(n)，其中n是要返回的keys的个数，这样这个命令的复杂度就取决于数据库的大小了。并且在这个操作执行期间，其它任何命令在你的实例中都无法执行。

这时我们可以尝试使用 SCAN 通过增量迭代的方式来扫描存储记录。内部原理基于游标的迭代器来实现的，并且支持随时停止或者重新继续。

### 2、找出 Redis 的慢操作命令 ###

每个系统都有很多慢操作，mysql如何监控慢sql是至关重要的系统优化方案。Redis 虽然没有非常详细的日志，但内部提供了命令统计工具

127.0.0.1:6379> INFO commandstats
    # Commandstats
    cmdstat_get:calls=78,usec=608,usec_per_call=7.79
    cmdstat_setex:calls=5,usec=71,usec_per_call=14.20
    cmdstat_keys:calls=2,usec=42,usec_per_call=21.00
    cmdstat_info:calls=10,usec=1931,usec_per_call=193.10

通过这个工具可以查看所有命令统计的快照，比如命令执行了多少次，执行命令所耗费的毫秒数(每个命令的总时间和平均时间)

只需要简单地执行 CONFIG RESETSTAT 命令就可以重置，这样你就可以得到一个全新的统计结果。

### 3、Hash 就一把利器 ###

以一种优雅的方式引入 hash 吧。hash 将会带给你一种前所未有的体验。之前我曾看到过许多类似于下面这样的key结构：

foo:first_name
    foo:last_name
    foo:address

上面的例子中，foo 可能是一个用户的用户名，其中的每一项都是一个单独的 key。这就增加了 犯错的空间，和一些不必要的 key。使用 hash 代替吧，你会惊奇地发现竟然只需要一个 key ：

127.0.0.1:6379> HSET foo first_name 'Joe'
    (integer) 1
    127.0.0.1:6379> HSET foo last_name 'Engel'
    (integer) 1
    127.0.0.1:6379> HSET foo address '1 Fanatical Pl'
    (integer) 1
    127.0.0.1:6379> HGETALL foo
    1) 'first_name'
    2) 'Joe'
    3) 'last_name'
    4) 'Engel'
    5) 'address'
    6) '1 Fanatical Pl'
    127.0.0.1:6379> HGET foo first_name
    'Joe'

### 4、 二进制数据存储 ###

Set的时候如果是字符串或者字符数据的话Redis会直接保存起来（字符串内部机制也是保存二进制），如果是其他类型会默认进行json序列化然后再保存起来

Set的时候最好指定过期时间防止有些需要删除的数据，我们忘记删了，浪费内存空间。要知道内存还是很贵的。

Get的时候如果是字符串或者字符数据会直接获取，如果是其他类型会进行json反序列化

###     ###

### 5、 集合可以解决很多问题 ###

集合，用的比较多的是用在一个需要精确判断的去重功能。像我们每天有三千万订单，这三千万订单可以有重复，这时候我想统计下一共有订单，这时候直接数据库group by是不大可能的，因为数据库中分了十几张表，这里分享个实战经验：比方说揽收，商家发货了，网点要把件收回来，但是收回来之前网点不知道自己有多少货啊，这时候我们做了一个功能，也就是订单会发送到我们公司来，我们会建一个time\_site的key的集合，而且集合本身有去重的功能，而且我们可以很方便的通过set.Count功能来统计数量，当件被揽收以后，我们后台把这个件从集合中Remove掉。然后这个Set中存在的就是网点还没有揽收的件，这时候通过Count就会知道这个网点今天还有多少件没有揽收。实际使用中这个数量比较大，因为有几万个网点。

###  ###

### 6、不要耗尽一个实例 ###

无论什么时候，只要有可能就分散多redis实例的工作量。从3.0.0版本开始，Redis就支持集群了。Redis集群允许你基于key范围分离出部分包含主/从模式的key。完整的集群背后的“魔法”可以在这里找到。但如果你是在找教程，那这里是一个再适合不过的地方了。如果不能选择集群，考虑一下命名空间吧，然后将你的key分散到多个实例之中。关于怎样分配数据，在redis.io网站上有这篇精彩的评论。

### 7、系统高可用 ###

到目前为止 Redis Sentinel 已经经过了很全面的测试，很多用户已经将其应用到了生产环境中（包括 ObjectRocket ）。如果你的应用重度依赖于 Redis ，那就需要想出一个高可用方案来保证其不会掉线。当然，如果不想自己管理这些东西，ObjectRocket 提供了一个高可用平台，并提供7×24小时的技术支持，有意向的话可以考虑一下。

**8、其他**

Redis异步尽量不用，因为Redis延迟本身很小，大概在100us-200us，再一个就是Redis本身是单线程的，异步任务切换的耗时比网络耗时还要大。

List用法：物联网中数据上传，量比较大时，我们可以把这些数据先放在Redis的List中，比如说一秒钟1万条，然后再批量取出来然后批量插入数据库中。这时候要设置好key，可以前缀+时间，对于已经处理的List可以进行remove移除。

合理设计每一对Key的Value大小，包括但不限于使用批量获取，原则是让每次网络包控制在1.4k字节附近，减少通信次数（实际经验几十k，几百k也是没问题的）

使用管道 Pipeline 合并一批命令，先分组，再对结果汇总。Redis的主要性能瓶颈是序列化、网络带宽和内存大小，滥用时处理器也会达到瓶颈。

[f7d3ae9e661a4ed8bd88083685d3c4e8.jpeg]: https://img-blog.csdnimg.cn/img_convert/f7d3ae9e661a4ed8bd88083685d3c4e8.jpeg