Redis的Bitmap使用总结- 宣布大事

落日映苍穹つ 2022-10-10 01:35 223阅读 0赞

在日常的开发中, redis的BitMap做过滤非常的方便, 但是存在一些坑, 所以记录下来, 给大家学习下:

1. Redis 的 bitmap 的key的长度会影响它的性能, 最大是2的32次方, 要是10位数就是10亿了, 必然比从0开始慢. 例如

bitmap set myBit 1 1, 必然会比bitmap set myBit 1000000 1  要快. 单个查询没啥影响, 但是查询的数量一旦大了性能差异就非常大了.

2. bitmap 在 redis 中按 string 来存储，因此上限是 512MB（2^32 bits）.

setbit  myBit  0 1

Setbit  myBit 999999999 1

因此当我的第二个 setbit 值为 2^32-1=4294967295 时，由于 redis 没有采用压缩实现，就会直接申请到 512MB 内存空间来存储 2^32-1 bit 位置的值 1，中间的 bit 也会全填上 0.

而 guava 中 EWAHCompressedBitmap 是一种压缩的 bitmap 实现，将 64 bit 作为一个 word（一个 long 的长度），4个 word 作为一组，并在每一组的第一个 word 引入了 Running Length Word （携带跨度信息 word，类似路标）概念，其他三个 word 为 Literal Word（直接存储信息的 word）。在压缩 bitmap 实现下，本文的两个 setbit 操作就不会使 EWAHCompressedBitmap 内存占用暴涨，而是只会使用 2组 word，即 64 bytes.

不过即使通过压缩节省了空间，google 官方仍建议使用者从小到大来插入数据......

所以为了测试，给 redis bitmap 试了两个骚操作，结果证明 redis bitmap 没有用压缩结构实现.

这个问题解决方案：

https://blog.csdn.net/weixin\_40721856/article/details/103112042

1、首先按天维护一个String值，就是将每天的最大id保存一下。我们叙述方便，将其记为 maxId。

2、每一天维护bitmap的时候，位置数值-昨天的maxid。

例如：昨天最大的id是10000，今天的id肯定是从10000以后开始的。

以我们要存储10005这个数值来计算，我们先拿到昨天的maxId(10000)，然后用10005-10000 =5 来表示这个id，只需要将今天的bitmap的第五位设置成1就可以解决这个问题了。

3.使用命令  info memory ,查询redis的内存占用.

开始准备截图的, 后面又忘记截图了, 等以后再把截图补上.

宣布一件大事.

今天领了结婚照, 国家分配的对象已经到了, 已经建立了长期稳定的合作伙伴关系. 哈哈哈哈

发表评论取消回复

表情：

评论列表（有 0 条评论，223人围观）

还没有评论，来说两句吧...

相关阅读

相关使用redis bitmap实现签到功能

1.签到功能的实现思路最近有研究到用户的签到功能,对功能进行设计的时候想到使用msyql存储用户的签到记录，将用户的每日签到记录存储到表中,然后又想到每次签到就往表里面

墨蓝/ 2024年03月26日 13:51/ 0 赞/ 59 阅读

相关 Redis：BitMap使用（用户签到）

我们按月来统计用户签到信息，签到记录为1，未签到则记录为0. 把每一个bit位对应当月的每一天，形成了映射关系。用0和1标示业务状态，这种思路就称为位图（BitMap）。

╰+攻爆jí腚メ/ 2024年03月24日 08:41/ 0 赞/ 54 阅读

相关 ⑥【bitmap 】Redis数据类型： bitmap [使用手册]

![在这里插入图片描述][8d8e0d8a542946af858489a536162608.gif_pic_center] > 个人简介：Java领域新星创作者；阿里云技术博

刺骨的言语ヽ痛彻心扉/ 2024年02月17日 10:31/ 0 赞/ 32 阅读

相关 redis中bitmap的使用

1000万的用户进行打卡签到，一天使用的内存为10000000/8/1024/1024 = 1.19M 参考链接：[分布式缓存Redis之bitmap][Redis_bit

快来打我*/ 2023年06月13日 06:04/ 0 赞/ 6 阅读

相关 Redis BitMap 使用场景及实现

转载自： [https://codingnote.cc/p/157727][https_codingnote.cc_p_157727] [https://diuut.com

痛定思痛。/ 2022年11月29日 11:56/ 0 赞/ 193 阅读

相关 Redis的Bitmap使用总结- 宣布大事

在日常的开发中, redis的BitMap做过滤非常的方便, 但是存在一些坑, 所以记录下来, 给大家学习下: 1. Redis 的 bitmap 的key的长度会影响它的性

落日映苍穹つ/ 2022年10月10日 01:35/ 0 赞/ 224 阅读

相关 redis-bitMap

记录一下使用bitMap的一些操作。 bit操作保存的数据只能是0或者1，这对于判断true/false的统计具备天然的优势。比如签到签退等等。同时也记录一下踩过

我不是女神ヾ/ 2022年05月22日 11:10/ 0 赞/ 170 阅读

相关 Redis Bitmaps的使用

Bitmaps是Redis支持的一种数据结构，value是一个长字符串，字符串上每一个字符的值只能是 0 或 1。看起来像是一个二进制的数据结构，其实只是一个字符串，所以严格来

朱雀/ 2022年05月14日 09:45/ 0 赞/ 193 阅读

相关 Redis Bitmaps的使用

[转自：原文][Link 1] Bitmaps是Redis支持的一种数据结构，value是一个长字符串，字符串上每一个字符的值只能是 0 或 1。看起来像是一个二进制的数据结

不念不忘少年蓝@/ 2021年10月14日 05:36/ 0 赞/ 266 阅读

相关 Redis-Bitmap介绍及使用

目录 1、Bitmap是什么 2、Bitmap 基本命令 3、Bitmap的优点和限制 4、Bitmap使用场景 4.1、引入依赖、配置 4.2、活跃用户 4.3

淡淡的烟草味﹌/ 2021年09月25日 11:18/ 0 赞/ 496 阅读