Guava的两种本地缓存策略
Guava的两种缓存策略
缓存在很多场景下都需要使用,如果电商网站的商品类别的查询,订单查询,用户基本信息的查询等等,针对这种读多写少的业务,都可以考虑使用到缓存。在一般的缓存系统中,除了分布式缓存,还会有多级缓存,在提升一定性能的前提下,可以在一定程度上避免缓存击穿或缓存雪崩,也能降低分布式缓存的负载。
GuavaCache的优点
1)很好的封装了get、put操作,能够集成数据源。一般我们在业务中操作缓存都会操作缓存和数据源两部分。例如:put数据时,先插入DB再删除原来的缓存,get数据时,先查缓存,命中则返回,没有命中时需要查询DB,再把查询结果放入缓存中。Guava封装了这么多步骤,只需要调用一次get/put方法即可
2)它是线程安全的缓存,与ConcurrentMap相似,但前者增加了更多的元素失效策略,后者只能显示的移除元素
3)GuavaCache提供了三种基本的缓存回收方式:基于容量回收、定时回收和基于引用回收。定时回收有两种:按照写入时间,最早写入的最先回收;按照访问时间,最早访问的最早回收
4)它可以监控加载/命中情况
Cache类型本地缓存
package com.mine.localcache.guava;
import com.google.common.cache.Cache;
import com.google.common.cache.CacheBuilder;
import java.util.Map;
import java.util.concurrent.Callable;
import java.util.concurrent.TimeUnit;
/**
* ******************************
* author: 柯贤铭
* createTime: 2019/7/30 14:21
* description: Guava 本地缓存 -> Cache类型
* 用于SpringBoot项目中,启用单例模式 项目启动时进行初始化
* pay attention -> A. 注意不要重复实例化, 最好交由IOC管理
* B. 注意如果是写操作则获取缓存值后拷贝一份副本,然后传递该副本,进行修改操作
* C. 支持自定义call回调
* version: V1.0
* ******************************
*/
public class CacheUtil {
/***
* 构造方法 - 进行初始化
* @param maxSize 最大容量
* @param invalidTime 刷新时间 | 基于分钟级别
*/
public CacheUtil(long maxSize, long invalidTime) {
init(maxSize, invalidTime);
}
/***
* 初始化
*/
private void init (long maxSize, long invalidTime) {
// 缓存
cache = CacheBuilder.newBuilder()
// 设置缓存在写入invalidTime分钟后失效
.expireAfterWrite(invalidTime, TimeUnit.MINUTES)
// 设置缓存个数
.maximumSize(maxSize)
.concurrencyLevel(Runtime.getRuntime().availableProcessors())
.recordStats()
.build();
}
/***
* Guava Cache类型缓存
*/
private Cache cache;
/**
* 对外暴露的方法 -> 从缓存中取value,没取到会返回null
*
*/
public Object getValue (String key) {
return cache.getIfPresent(key);
}
/**
* 对外暴露的方法 -> 从缓存中取value,没取到会执行call
*
*/
public Object getValue (String key, Callable callable) throws Exception {
return cache.get(key, callable);
}
/**
* 对外暴露的方法 -> put
*
*/
public void putValue (String key, Object value) {
cache.put(key, value);
}
/**
* 对外暴露的方法 -> putMap
*
*/
public void putMap (String key, Map map) {
cache.putAll(map);
}
/**
* 对外暴露的方法 -> 判断是否存在key
*
*/
public boolean constainsKey (String key) {
return cache.asMap().containsKey(key);
}
}
Loading类型缓存
package com.mine.localcache.guava;
import com.google.common.cache.CacheBuilder;
import com.google.common.cache.CacheLoader;
import com.google.common.cache.LoadingCache;
import com.google.common.util.concurrent.ListenableFuture;
import com.google.common.util.concurrent.ListeningExecutorService;
import com.google.common.util.concurrent.MoreExecutors;
import java.util.concurrent.ExecutionException;
import java.util.concurrent.LinkedBlockingQueue;
import java.util.concurrent.ThreadPoolExecutor;
import java.util.concurrent.TimeUnit;
/**
* ******************************
* author: 柯贤铭
* createTime: 2019/7/30 14:21
* description: Guava 本地缓存 -> LoadingCache类型
* 用于SpringBoot项目中,启用单例模式 项目启动时进行初始化
* 博文参考: https://www.cnblogs.com/csonezp/p/10011031.html
* pay attention -> A. 注意不要重复实例化, 最好交由IOC管理
* B. 注意重写与之匹配的数据源获取方法 - getFromDB
* C. 注意如果是写操作则获取缓存值后拷贝一份副本,然后传递该副本,进行修改操作
* D. 注意绝对不要返回null值作为value, 会引发InvalidCacheLoadException异常
* 对于该情况可以自定义处理方式, 主动将其捕获
* E. 此类型缓存提倡自动加载缓存数据, 因此尽量避免手动put
* 如果需要更灵活的方案可以使用Cache类型
* F. 灵活设置参数, 启用自动失效策略或者自动刷新策略
* version: V1.0
* ******************************
*/
public class LoadingCacheUtil {
/***
* 构造方法 - 进行初始化
* @param maxSize 最大容量
* @param refreshTime 刷新时间 | 基于分钟级别
*/
public LoadingCacheUtil(long maxSize, long refreshTime) {
init(maxSize, refreshTime);
}
/***
* 初始化
*/
private void init (long maxSize, long refreshTime) {
// 刷新线程池 -> 如果数据都没了则启用后台线程进行刷新,让用户无感知 -> 核心线程数 1, 最大线程数 2
backgroundRefreshPools = MoreExecutors.listeningDecorator(new ThreadPoolExecutor(1, 2, 0L, TimeUnit.MILLISECONDS, new LinkedBlockingQueue<>()));
// 缓存
cache = CacheBuilder.newBuilder()
// 缓存刷新时间
.refreshAfterWrite(refreshTime, TimeUnit.MINUTES)
// 设置缓存在写入invalidTime分钟后失效
//.expireAfterWrite(refreshTime, TimeUnit.MINUTES)
// 设置缓存个数
.maximumSize(maxSize)
.concurrencyLevel(Runtime.getRuntime().availableProcessors())
.recordStats()
.build(new CacheLoader<String, Object>() {
// 当本地缓存命没有中时,调用load方法获取结果并将结果缓存
@Override
public Object load(String appKey) {
return getFromDB(appKey);
}
// 刷新时,开启一个新线程异步刷新,老请求直接返回旧值,防止耗时过长
@Override
public ListenableFuture<Object> reload(String key, Object oldValue) {
return backgroundRefreshPools.submit(() -> getFromDB(key));
}
// 数据库进行查询
private Object getFromDB (String key) {
// return entryMapper.selectByName(name)
return null;
}
});
}
/**
* 后台处理线程池
*/
private ListeningExecutorService backgroundRefreshPools;
/***
* Guava LoadingCache类型缓存
*/
private LoadingCache cache;
/**
* 对外暴露的方法 -> 从缓存中取value,没取到会自动重载缓存,如果载入为null则触发异常
*
*/
public Object getValue (String key) throws ExecutionException {
return cache.get(key);
}
/**
* 对外暴露的方法 -> 判断是否存在key
*
*/
public boolean constainsKey (String key) {
return cache.asMap().containsKey(key);
}
}
总结
1.本地缓存其实很多种数据结构都支持,比如线程安全的ConcurrentHashMap,用该结构配合TimerTask定时清除key,也可以实现,但是一是自己写的代码肯定没有谷歌工具厉害,另外一点,缓存更重要的特性不是可存可取,而是可以自动的去识别哪些key更活跃,哪些key不活跃,删除掉,
因此基于LRU算法,Google提供的Guava就可以很好的满足这一点2.Cache类型缓存更像ConcurrentHashMap,有点随便存随便取的意思,同时支持定时回收,也支持get不到缓存内容时走call回调接口去数据,总的来说非常方便
3.LoadingCache类型缓存相比而言用的更加规范一些,它提供的思想是有一套完整的DB方案,提供定时刷新缓存,提供默认load方法,reload方法,相比于Cache,它要求更加严格,比如缓存内容不可返回null等等,也不建议手动put数据,而是专门通过DB的途径去刷新数据,因此真正的生产环境用的会更多一些
QQ:806857264
GitHub:https://github.com/kkzhilu
如有什么问题,望指正,互相交流
Guava的两种本地缓存策略的更多相关文章
- iOS五种本地缓存数据方式
iOS五种本地缓存数据方式 iOS本地缓存数据方式有五种:前言 1.直接写文件方式:可以存储的对象有NSString.NSArray.NSDictionary.NSData.NSNumber,数据 ...
- UWP开发中两种网络图片缓存方法
通常情况下,我们的程序需要从服务器读取图片,但如果需要不止一次读取某一张图片的话,就需要做本地缓存了,这样既为用户省一点流量,又能显得你的APP很快. 假如你已经知道了某一张图片的地址,那么第一件事就 ...
- Guava - LoadingCache实现Java本地缓存
前言 Guava是Google开源出来的一套工具库.其中提供的cache模块非常方便,是一种与ConcurrentMap相似的缓存Map. 官方地址:https://github.com/google ...
- .net 4.0 自定义本地缓存策略的不同实现
在分布式系统的开发中,为了提高系统运行性能,我们从服务器中获取的数据需要缓存在本地,以便下次使用,而不用从服务器中重复获取,有同学可能要问,为什么不使用 分布式缓存等,注意,服务器端肯定是考虑到扩展, ...
- Arcgis 离线部署api 4.x的两种本地部署方法!
引言:本文用的是api4.6版本 方法一 拷贝api进去tomcat服务器用绝对地址引用 首先将下载好的api放入Tomcat服务中的Webapp下: 1 可以打开下载好的的 api46/arcg ...
- Spring-Redis缓存业务优化(通配符删除、两种自定义缓存时长)
application.yml配置 spring: cache: type: REDIS redis: time-to-live: PT300S # 默认缓存秒数 ...
- 使用guava cache在本地缓存热点数据
某些热点数据在短时间内可能会被成千上万次访问,所以除了放在redis之外,还可以放在本地内存,也就是JVM的内存中. 我们可以使用google的guava cache组件实现本地缓存,之所以选择gua ...
- 两种语言实现设计模式(C++和Java)(三:策略模式)
策略模式是指定义一系列的算法,把它们一个个封装起来,并且使它们可相互替换.本模式使得算法可独立于使用它的客户而变化.也就是说这些算法所完成的功能一样,对外的接口一样,只是各自实现上存在差异.用策略模式 ...
- springboot之本地缓存(guava与caffeine)
1. 场景描述 因项目要使用本地缓存,具体为啥不用redis等,就不讨论,记录下过程,希望能帮到需要的朋友. 2.解决方案 2.1 使用google的guava作为本地缓存 初步的想法是使用googl ...
随机推荐
- 图解MySQL索引(三)—如何正确使用索引?
MySQL使用了B+Tree作为底层数据结构,能够实现快速高效的数据查询功能.工作中可怕的是没有建立索引,比这更可怕的是建好了索引又没有使用到.本文将围绕着如何优雅的使用索引,图文并茂地和大家一起探讨 ...
- HTML新增的语义化标签及其作用
在html5中,新增了几个语义化标签:<article>.<section>.<aside>.<hgroup>. <header>,< ...
- c++ UDP套接字客服端代码示范
c++ UDP套接字客服端代码示范 #include<winsock2.h> //包含头文件 #include<stdio.h> #include<windows.h&g ...
- CentOS7 开机进入emergency mode
今天突然操作了一下磁盘挂载,然后系统启动之后,就直接进入emergency模式了,然后只能输入密码进行救援,截图如下: 突然想了一下最近的一次操作,是因为要挂在镜像,然后每次开机都要挂载一次,觉得比较 ...
- django 网站域名解析 IP绑定 新建站 新域名
备案成功后,我们要用域名来访问服务器,这个不仅要修改nginx的配置文件,还要设置域名的解析,下面是我的一个调试经验过程:直接上图了. 1.问题查找
- Spring Cloud面试题万字解析(2020面试必备)
1.什么是 Spring Cloud? Spring cloud 流应用程序启动器是 于 Spring Boot 的 Spring 集成应用程序,提供与外部系统的集成.Spring cloud Tas ...
- 计算机网络之DNS协议
DNS( Domain Name System)是“域名系统”的英文缩写,是一种组织成域层次结构的计算机和网络服务命名系统,它用于TCP/IP网络,它所提供的服务是用来将主机名和域名转换为IP地址的工 ...
- 入门大数据---通过Yarn搭建MapReduce和应用实例
上一篇中我们了解了MapReduce和Yarn的基本概念,接下来带领大家搭建下Mapreduce-HA的框架. 结构图如下: 开始搭建: 一.配置环境 注:可以现在一台计算机上进行配置,然后分发给其它 ...
- 小技巧:如何快速开启一个静态 HTTP 服务?
静态 HTTP 服务的几个用途: 静态网页的 HTTP 服务,以访问浏览 如:生成的文档.博客等 公开文件的 HTTP 服务,以访问下载 如:分享的文档.安装包等 以下会介绍目前我了解的方式中,最推荐 ...
- 4W字的后端面试知识点总结(持续更新)
点赞再看,养成习惯,微信搜索[三太子敖丙]关注这个互联网苟且偷生的工具人. 本文 GitHub https://github.com/JavaFamily 已收录,有一线大厂面试完整考点.资料以及我的 ...