Redis: 缓存过期.缓存雪崩.缓存穿透.缓存击穿(热点).缓存并发(热点).多级缓存.布隆过滤器 2019年08月18日 16:34:24 hanchao5272 阅读数 1026更多 分类专栏: Redis 分布式   版权声明:本文为博主原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明. 本文链接:https://blog.csdn.net/hanchao5272/article/details/99706189 1.缓存过期 缓存过期:在使用缓存时,可以通…
面试经历 在很长的一段时间里,我以为缓存击穿和缓存穿透是一个东西,直到最近去腾讯面试,面试官问我缓存击穿和穿透的区别:我回答它俩是一样的,面试官马上抬起头用他那细长的单眼皮眼睛瞪着我说:"你确定吗?",最后面试提醒我,既然有不同的名字,那他们肯定就是不一样的,也就是说缓存击穿和缓存穿透不是一个东西: 那么今天我们就看看这俩玩意的区别,以及它们引发的后果: 在项目中加入缓存 一般情况下,我们会把热点数据放到缓存中,比如常用的字典.用户信息.订单详情等等:也就是说,当项目启动后,先将热点数…
击穿 大家都知道,计算机的瓶颈之一就是IO,为了解决内存与磁盘速度不匹配的问题,产生了缓存,将一些热点数据放在内存中,随用随取,降低连接到数据库的请求链接,避免数据库挂掉.需要注意的是,无论是击穿还是后面谈到的穿透与雪崩,都是在高并发前提下,当缓存中某一个热点key失效, 为什么会有击穿发生呢? 有两个主要原因: Key过期 Key被页面置换淘汰 对于第一个原因是因为在Redis中,Key有过期时间,如果某一个时刻(假如商城做活动,零点开始)key失效,那么零点之后对某一个商品查询请求将全都压到…
导读 使用Redis难免会遇到Redis缓存穿透,缓存击穿,缓存雪崩,热点Key的问题.有些同学可能只是会用Redis来存取,基本都是用项目里封装的工具类来操作.但是作为开发,我们使用Redis时可能会遇到上述问题,可能你还不知道这几个名词是什么意思,那么现在就让我们一起来探讨下吧. 首先我们使用Redis的逻辑是这样的: 即:先从缓存取,缓存有就直接返回,没有就查库,查到就存Redis里,没有返回空. 在实际使用Redis的时候一定会遇到缓存穿透.缓存击穿.缓存雪崩和热点key的问题,这几个概…
Redis缓存的使用,极大的提升了应用程序的性能和效率,特别是数据查询方面.但同时,它也带来了一些问题.其中,最要害的问题,就是数据的一致性问题,从严格意义上讲,这个问题无解.如果对数据的一致性要求很高,那么就不能使用缓存. 一.缓存穿透 是指查询一个数据库一定不存在的数据,正常的使用缓存的流程大致是,数据查询先进行缓存查询,如果key不存在或者key已经过期,再对数据库进行查询,并把查询到的对象,放到缓存.如果数据库查询对象为空,则不放进缓存. 1.参数传入对象主键ID 2.根据key从缓存中…
在开发中会面临缓存异常可能会出现三个问题,分别是缓存雪崩.缓存击穿和缓存穿透.这三个问题会导致大量请求从缓存转移到数据库,如果请求的并发量很大的话,就会导致数据库崩溃.所以在面试官也会经常问这些问题. 缓存雪崩 缓存雪崩是指大量的请求无法在缓存中处理,从而将请求转移到数据库中,导致数据压力倍增.一个Redis实例可以支持万级别的并发请求,而单个数据库只能支持千级别的并发请求.两者处理请求并发能力相差十倍,数据库会由于压力过大而导致雪崩. 这里雪崩一般是由两个原因组成,很多文章只写缓存同时过期的情…
缓存穿透 缓存穿透是指查询一个一定不存在的数据,由于缓存是不命中时需要从数据库查询,查不到数据则不写入缓存,这将导致这个不存在的数据每次请求都要到数据库去查询,造成缓存穿透. 解决办法: 预校验 在控制层对查询参数先进行校验,不符合则丢弃. 布隆过滤 将所有可能查询的参数添加到BloomFilter中,一定不存在的记录就会被BloomFilter过滤掉,从而避免了对底层存储系统的查询压力. 缓存空对象 如果一个查询返回的数据为空(不管是数据不存在,还是系统故障),我们仍然把这个空结果进行缓存,但…
缓存穿透 缓存穿透是指用户查询数据,在数据库没有,自然在缓存中也不会有.这样就导致用户查询的时候,在缓存中找不到,每次都要去数据库再查询一遍,然后返回空(相当于进行了两次无用的查询).这样请求就会绕过缓存直接查数据库,这也是经常提的缓存命中率问题. 解决办法: 1.我们任然把这个空结果进行缓存,但它的过期时间会很短,最长不超过五分钟.通过这个直接设置的默认值放到缓存,这样第二次到缓存中获取就有值了 2.布隆过滤器 缓存击穿 缓存击穿是指缓存中没有但数据库中有的数据(一般是缓存时间到期),这时由于…
一.缓存雪崩 缓存雪崩表示:指缓存同一时间大面积失效或缓存重启又或者第一次启用缓存的情况下,导致请求跳过缓存直接请求数据库,造成数据库短时间内承受大量请求而崩掉. 解决方案: 方案一 缓存数据的过期时间设置随机,防止同一时间到大量数据过期现象发生. 方案二 给每个缓存数据增加响应的缓存标记,记录缓存是否失效,如果缓存标记失效,则更新数据库缓存 优点: 数据在即将或已经失效的情况下,立刻重新从数据库取出数据进行缓存,避免后续请求直接请求数据库. 缺陷: 性能损耗较大,需要对缓存失效进行监听 方案三…
穿透 穿透:频繁查询一个不存在的数据,由于缓存不命中,每次都要查询持久层.从而失去缓存的意义. 解决办法:①用一个bitmap和n个hash函数做布隆过滤器过滤没有在缓存的键.   ②持久层查询不到就缓存空结果,有效时间为数分钟. 转:https://www.cnblogs.com/rjzheng/p/8908073.html 什么是缓存击穿 在谈论缓存击穿之前,我们先来回忆下从缓存中加载数据的逻辑,如下图所示 因此,如果黑客每次故意查询一个在缓存内必然不存在的数据,导致每次请求都要去存储层去查…