Redis 实战篇：巧用Bitmap 实现亿级海量数据统计

朱雀 2023-10-03 14:51 1阅读 0赞

在移动应用的业务场景中，我们需要保存这样的信息：一个 key 关联了一个数据集合。

常见的场景如下：

*  给一个 userId ，判断用户登陆状态；
 *  显示用户某个月的签到次数和首次签到时间；
 *  两亿用户最近 7 天的签到情况，统计 7 天内连续签到的用户总数；

通常情况下，我们面临的用户数量以及访问量都是巨大的，比如百万、千万级别的用户数量，或者千万级别、甚至亿级别的访问信息。

所以，我们必须要选择能够非常高效地统计大量数据（例如亿级）的集合类型。

**如何选择合适的数据集合，我们首先要了解常用的统计模式，并运用合理的数据了性来解决实际问题。**

四种统计类型：

1.  二值状态统计；
2.  聚合统计；
3.  排序统计；
4.  基数统计。

本文将由**二值状态统计类型**作为实战篇系列的开篇，文中将用到 [String、Set、Zset、List、hash][String_Set_Zset_List_hash] 以外的拓展数据类型 `Bitmap` 来实现。

文章涉及到的指令可以通过在线 Redis 客户端运行调试，地址：[https://www.cnblogs.com/aishangJava/p/15180956.html][String_Set_Zset_List_hash][，超方便的说。][Link 1]

## 寄语 ##

> 多分享多付出，前期多给别人创造价值并且不计回报，从长远来看，这些付出都会成倍的回报你。
> 
> 特别是刚开始跟别人合作的时候，不要去计较短期的回报，没有太大意义，更多的是锻炼自己的视野、视角以及解决问题的能力。

# 二值状态统计 #

> 码哥，什么是二值状态统计呀？

也就是集合中的元素的值只有 0 和 1 两种，在签到打卡和用户是否登陆的场景中，只需记录`签到(1)`或 `未签到(0)`，`已登录(1)`或`未登陆(0)`。

假如我们在判断用户是否登陆的场景中使用 Redis 的 String 类型实现（**key -&**

[String_Set_Zset_List_hash]: https://www.cnblogs.com/aishangJava/p/15180956.html
[Link 1]: https://try.redis.io/%EF%BC%8C%E8%B6%85%E6%96%B9%E4%BE%BF%E7%9A%84%E8%AF%B4%E3%80%82

发表评论取消回复

表情：

评论列表（有 0 条评论，1人围观）

还没有评论，来说两句吧...

相关阅读

相关 SpringBoot + Redis的Bitmap实现活跃用户统计

前言 Redis的Bitmap数据结构是一种紧凑的位图，它可以用于实现各种场景，其中统计活跃用户是一种经典的业务场景。实现原理是，通过将每个用户表示为一个位，从而跟踪用

我就是我/ 2024年02月18日 11:40/ 0 赞/ 42 阅读

相关 Redis 实战篇：巧用Bitmap 实现亿级海量数据统计

在移动应用的业务场景中，我们需要保存这样的信息：一个 key 关联了一个数据集合。常见的场景如下：给一个 userId ，判断用户登陆状态；显示用户某个月

朱雀/ 2023年10月03日 14:51/ 0 赞/ 2 阅读

相关海量数据处理-----bitmap

【什么是Bit-map】所谓的Bit-map就是用一个bit位来标记某个元素对应的Value，而Key即是该元素。由于采用了Bit为单位来存储数据，因此在存储空间方面，可

我会带着你远行/ 2022年08月27日 03:37/ 0 赞/ 227 阅读

相关用Redis bitmap统计活跃用户、留存

Spool的开发者博客，描述了Spool利用Redis的bitmaps相关的操作，进行网站活跃用户统计工作。原文：http://blog.getspo

落日映苍穹つ/ 2022年08月14日 05:00/ 0 赞/ 204 阅读

相关用Redis bitmap统计活跃用户、留存

[用Redis bitmap统计活跃用户、留存][Redis bitmap] 分类： [NOSQL][] [大数据处理][Link 1] Spoo

水深无声/ 2022年08月05日 07:29/ 0 赞/ 279 阅读

相关亿级数据迁移实战方案,真实案例

背景: 公司某业务模块的用户通讯记录和通话记录的表，单表记录过亿了,mysql很坚挺好不好！！！！其中某表是205773235 约2.0亿另外某表是575213

冷不防/ 2022年06月08日 06:56/ 0 赞/ 290 阅读

相关 BitMap--解决海量数据

一、概述本文将讲述Bit-Map算法的相关原理,Bit-Map算法的一些利用场景，例如BitMap解决海量数据寻找重复、判断个别元素是否在海量数据当中等问题.最后说说B

系统管理员/ 2022年06月07日 23:09/ 0 赞/ 208 阅读

相关海量数据解决思路之BitMap

本文转自：[https://blog.csdn.net/u013063153/article/details/70800381][https_blog.csdn.net_u01

谁借莪１个温暖的怀抱￠/ 2022年05月21日 00:14/ 0 赞/ 190 阅读

相关海量数据解决思路之BitMap

一、概述本文将讲述Bit-Map算法的相关原理,Bit-Map算法的一些利用场景，例如BitMap解决海量数据寻找重复、判断个别元素是否在海量数据当中等问题.最后说说B

布满荆棘的人生/ 2022年04月21日 15:32/ 0 赞/ 211 阅读

相关用Redis bitmap统计活跃用户、留存

Spool的开发者博客，描述了Spool利用Redis的bitmaps相关的操作，进行网站活跃用户统计工作。原文：http://blog.getspo

刺骨的言语ヽ痛彻心扉/ 2022年01月14日 14:05/ 0 赞/ 220 阅读