Redis统计访问量的3种实现方式

 更新时间:2025年06月10日 09:39:47   作者:Java程序员 拥抱ai  
这篇文章主要介绍了Redis统计访问量的3种实现方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教

一、你是否遇到过这些统计难题?

  • 高并发场景下内存爆炸:用Hash统计日活时,单键内存占用飙升到10MB?
  • 独立访客重复计数:用户多次访问被重复统计,导致UV数据虚高?
  • 近似值误差过大:百万级PV统计时,误差率超过5%?

这些问题,Redis的3种核心方案能帮你解决!

二、方案一:Hash结构实时统计

适用场景:

  • 实时统计独立用户(如日活/周活)
  • 需要精确计数(如商品点击次数)

核心代码:

# 场景:记录用户访问时间戳(防重复计数)
pipeline.hset("user:visits:202310", user_id, time.time())
pipeline.expire("user:visits:202310", 86400)  # 每天清理一次

# 统计当前活跃用户数
current_uv = redis.hlen("user:visits:202310")

参数说明:

  • hset:哈希表存储用户ID和最后访问时间
  • expire:自动清理过期数据,避免内存泄漏
  • 痛点解决:通过时间戳去重,精确统计独立用户

内存优化技巧:

  • 问题:10万用户ID存储需约100KB * 10^5 = 10GB
  • 方案:使用user_id:md5缩短键名,内存占用可降低至**<1MB/万用户**

三、方案二:BitMap统计独立访客

适用场景:

  • 亿级用户规模的UV统计
  • 内存敏感场景(如单机统计全站访问量)

核心代码:

# 场景:统计本月访问过的用户(假设用户ID为整数)
user_id = 123456
redis.setbit("uv:202310", user_id, 1)

# 获取本月UV总数
total_uv = redis.bitcount("uv:202310")

参数说明:

  • setbit:将用户ID对应位设为1,每个用户仅占1bit内存
  • bitcount:统计所有置位位数,时间复杂度O(1)

内存对比:

方法

100万用户内存占用

精度

Hash

~100MB

100%

BitMap~125KB100%

四、方案三:HyperLogLog估算UV

适用场景:

  • 超大规模近似统计(如全网日活)
  • 可接受误差的场景(误差率<0.8%)

核心代码:

# 场景:统计全站日活(误差率0.5%)  
redis.pfadd("uv:202310", user_id)
estimated_uv = redis.pfcount("uv:202310")

参数说明:

  • pfadd:将用户ID加入HyperLogLog结构
  • pfcount:返回近似值,内存占用仅<1KB/百万用户

性能对比:

方法

1000万用户内存

统计误差

BitMap

1.25MB

0%

HyperLogLog<1KB0.5%

五、实战选择指南

对比表格:

方案

内存占用

精度

适用场景

Hash

中(MB级)

100%

小规模精确统计

BitMap极低(KB级)

100%

大规模精确去重

HyperLogLog超低(KB级)

<1%

超大规模近似统计

优化建议:

  • 混合方案:用Hash统计小时级数据,用HyperLogLog汇总日级数据
  • 数据分片:对亿级用户ID按user_id % N分片存储,降低单键内存压力
  • 冷热分离:历史数据定期转储到MySQL,Redis仅保留活跃数据

六、总结

Redis统计访问量的本质是内存优化+算法选型的平衡。

  • 痛点场景:用BitMap解决内存爆炸,用HyperLogLog应对超大规模
  • 实时需求:Hash结构仍是精确统计的首选

以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。

相关文章

  • Redis出现(error)NOAUTH Authentication required.报错的解决办法(秒懂!)

    Redis出现(error)NOAUTH Authentication required.报错的解决办法(秒懂!)

    这篇文章主要给大家介绍了关于Redis出现(error)NOAUTH Authentication required.报错的解决办法,对于 这个错误这通常是因为Redis服务器需要密码进行身份验证,但客户端没有提供正确的身份验证信息导致的,需要的朋友可以参考下
    2024-03-03
  • Redis分布式锁的7种实现

    Redis分布式锁的7种实现

    这篇文章主要介绍了Redis分布式锁的实现
    2022-04-04
  • 详解RedisTemplate下Redis分布式锁引发的系列问题

    详解RedisTemplate下Redis分布式锁引发的系列问题

    这篇文章主要介绍了详解RedisTemplate下Redis分布式锁引发的系列问题,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2021-03-03
  • Redis key键的具体使用

    Redis key键的具体使用

    Redis 是一种键值(key-value)型的缓存型数据库,它将数据全部以键值对的形式存储在内存中,本文就来介绍一下key键的具体使用,感兴趣的可以了解一下
    2024-02-02
  • 深度解析Redis 数据淘汰策略

    深度解析Redis 数据淘汰策略

    本文将深入剖析8种淘汰策略的机制,并结合Java代码演示生产环境的最佳实践,文中通过示例代码介绍的非常详细,需要的朋友们下面随着小编来一起学习学习吧
    2025-04-04
  • Redis过期监听机制,订单超时自动取消方式

    Redis过期监听机制,订单超时自动取消方式

    这篇文章主要介绍了Redis过期监听机制,订单超时自动取消方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
    2024-05-05
  • 基于redis.properties文件的配置及说明介绍

    基于redis.properties文件的配置及说明介绍

    今天小编就为大家分享一篇基于redis.properties文件的配置及说明介绍,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2018-05-05
  • Redis事务处理的实现示例

    Redis事务处理的实现示例

    这篇文章主要介绍了Redis事务处理的实现示例,包括事务的原理、相关命令,如MULTI、EXEC、WATCH等、CAS乐观锁实现方式以及事务执行步骤,感兴趣的可以了解一下
    2025-10-10
  • Redis如何解决BigKey

    Redis如何解决BigKey

    在Redis的使用过程中,我们经常会遇到BigKey, BigKey的大值会导致Redis内存中产生大量不连续的碎片,降低内存利用效率,本文主要介绍了Redis如何解决BigKey,具有一定的参考价值,感兴趣的可以了解一下
    2024-01-01
  • 详解redis在服务器linux下启动的相关命令(安装和配置)

    详解redis在服务器linux下启动的相关命令(安装和配置)

    这篇文章主要介绍了redis在服务器linux下的启动的相关命令(安装和配置),本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2022-08-08

最新评论