Redis布隆过滤器防缓存穿透教程
本文深入解析了如何利用布隆过滤器有效防御Redis缓存穿透这一高危问题,指出Redis原生不支持布隆过滤器,需通过Redisson等第三方工具或手动维护bitmap实现;明确驳斥了仅依赖EXISTS命令或空值缓存的误区——前者无法拦截数据库根本不存在的非法ID,后者则极易引发缓存污染与内存失控;文章强调布隆过滤器以极小空间开销提供高效的“存在性否定判断”,但必须科学初始化(合理预估容量、控制误差率、启动时主动初始化),并严格嵌入请求链路最前端作为第一道防线,且所有写入操作必须源自数据库确认的合法数据;同时直面冷启动、key规则变更等生产级难题,给出预热、滚动重建等务实方案,帮助开发者真正落地可靠、高效、可控的缓存防护体系。

Redis 本身不内置 Bloom Filter,必须借助第三方实现(如 Redisson、Redission、或服务端自己维护 bitmap)才能用它防缓存穿透;直接在 redis-cli 里执行 BLOOM 命令会报错 —— 那是 Redis 7.0+ 的 BF.* 模块命令,需显式加载模块且不是所有部署都默认启用。
为什么不能只靠 EXISTS 或空值缓存来防穿透
因为 EXISTS key 只能查 Redis 里有没有这个 key,对「数据库根本不存在的非法 ID」毫无拦截能力;而空值缓存(比如 SET user:999999 "" EX 60)虽然能挡一次,但面对海量恶意构造的 key(如 user:1234567890、user:abc),会导致缓存被污染、内存暴涨,甚至触发淘汰策略误删有效数据。布隆过滤器的位图结构天然适合做「存在性快速否定」——它不存原始数据,只存哈希指纹,空间开销极小,且查询是 O(k) 时间(k 是哈希函数个数)。
Redisson 的 RBloomFilter 怎么初始化才不踩坑
常见错误是没设好预期插入量 expectedInsertions 和误差率 errorRate,导致后期 false positive(误判存在)飙升或位图撑爆内存。实际初始化时注意:
expectedInsertions要按「业务全量合法 key 的上限」预估,比如用户表最多 5000 万用户,就填50_000_000,不能填日活或月活errorRate别盲目设 0.01(1%),生产环境建议 0.03~0.05;低于 0.01 会使位图体积翻倍,但 false positive 下降并不线性- 务必在应用启动时一次性
RBloomFilter.tryInit(),否则首次add()会触发自动扩容,可能因并发写入导致结构不一致 - 不要把布隆过滤器当数据库用 —— 它不支持
delete,也不保证 100% 准确;mightContain(key)返回false才能确定 key 绝对不存在,返回true仍需查缓存/DB
请求链路中布隆过滤器该插在哪儿
位置错了等于白加。典型错误是把它放在缓存之后(先查 Redis,没命中再过布隆),这完全失去意义。正确顺序必须是:
请求 → RBloomFilter.mightContain("user:12345") → 若返回 false,直接返回 404 或空响应;若返回 true,再查 Redis 缓存 → 缓存 miss 再查 DB → DB 查不到则不写回布隆(避免把非法 key 也“记住”)→ DB 查到则 add 到布隆(仅对确认合法的 key)
关键点:布隆只负责「守大门」,不是「查户口」;所有写入布隆的操作,必须来自 DB 确认存在的数据源,不能由用户输入直接触发 add。
真正难的是冷启动 —— 新系统上线时布隆过滤器为空,所有请求都会被放行,这时候得配合空值缓存兜底,或者用离线脚本把历史合法 key 预热进去。另外,布隆过滤器无法应对 key 规则变化(比如从 user:id 改成 u:id),这种时候旧布隆就失效了,得滚动重建,而不是简单清空重来。
以上就是本文的全部内容了,是否有顺利帮助你解决问题?若是能给你带来学习上的帮助,请大家多多支持golang学习网!更多关于数据库的相关知识,也可关注golang学习网公众号。
Win11开启HDR游戏设置教程
- 上一篇
- Win11开启HDR游戏设置教程
- 下一篇
- Miro评论与批注使用技巧
-
- 数据库 · Redis | 20分钟前 |
- Redis购物车淘汰策略详解
- 450浏览 收藏
-
- 数据库 · Redis | 21分钟前 |
- RedisGEOADD内存增长问题解析
- 480浏览 收藏
-
- 数据库 · Redis | 4小时前 |
- RedisGEOPOS获取门店位置方法
- 288浏览 收藏
-
- 数据库 · Redis | 5小时前 |
- Redis布隆过滤器防缓存穿透教程
- 370浏览 收藏
-
- 数据库 · Redis | 13小时前 |
- Redis主从断开报错,JedisPool重连方法
- 111浏览 收藏
-
- 数据库 · Redis | 14小时前 |
- Redis大Key优化技巧分享
- 433浏览 收藏
-
- 数据库 · Redis | 1天前 |
- Redis主从断开频繁,调整repl-backlog-size优化缓冲区
- 487浏览 收藏
-
- 数据库 · Redis | 1天前 |
- WebFlux中实现响应式Redis操作方法
- 466浏览 收藏
-
- 数据库 · Redis | 1天前 |
- Redis Pub/Sub能替代消息队列吗?深度对比
- 381浏览 收藏
-
- 数据库 · Redis | 1天前 |
- Redis哨兵配置:主节点与仲裁设置详解
- 271浏览 收藏
-
- 数据库 · Redis | 1天前 |
- Redis发布订阅内存碎片清理方法
- 430浏览 收藏
-
- 数据库 · Redis | 1天前 |
- Redis大Value压缩技巧:LZ4/GZIP提升效率
- 267浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- ChatExcel酷表
- ChatExcel酷表是由北京大学团队打造的Excel聊天机器人,用自然语言操控表格,简化数据处理,告别繁琐操作,提升工作效率!适用于学生、上班族及政府人员。
- 4388次使用
-
- Any绘本
- 探索Any绘本(anypicturebook.com/zh),一款开源免费的AI绘本创作工具,基于Google Gemini与Flux AI模型,让您轻松创作个性化绘本。适用于家庭、教育、创作等多种场景,零门槛,高自由度,技术透明,本地可控。
- 4737次使用
-
- 可赞AI
- 可赞AI,AI驱动的办公可视化智能工具,助您轻松实现文本与可视化元素高效转化。无论是智能文档生成、多格式文本解析,还是一键生成专业图表、脑图、知识卡片,可赞AI都能让信息处理更清晰高效。覆盖数据汇报、会议纪要、内容营销等全场景,大幅提升办公效率,降低专业门槛,是您提升工作效率的得力助手。
- 4617次使用
-
- 星月写作
- 星月写作是国内首款聚焦中文网络小说创作的AI辅助工具,解决网文作者从构思到变现的全流程痛点。AI扫榜、专属模板、全链路适配,助力新人快速上手,资深作者效率倍增。
- 6391次使用
-
- MagicLight
- MagicLight.ai是全球首款叙事驱动型AI动画视频创作平台,专注于解决从故事想法到完整动画的全流程痛点。它通过自研AI模型,保障角色、风格、场景高度一致性,让零动画经验者也能高效产出专业级叙事内容。广泛适用于独立创作者、动画工作室、教育机构及企业营销,助您轻松实现创意落地与商业化。
- 4995次使用
-
- redis复制有可能碰到的问题汇总
- 2023-01-01 501浏览
-
- 使用lua+redis解决发多张券的并发问题
- 2023-01-27 501浏览
-
- Redis应用实例分享:社交媒体平台设计
- 2023-06-21 501浏览
-
- 使用Python和Redis构建日志分析系统:如何实时监控系统运行状况
- 2023-08-08 501浏览
-
- 如何利用Redis和Python实现消息队列功能
- 2023-08-16 501浏览

