【Guava】Guava Cache用法
背景
缓存的主要作用是暂时在内存中保存业务系统的数据处理结果,并且等待下次访问使用。在日长开发有很多场合,有一些数据量不是很大,不会经常改动,并且访问非常频繁。但是由于受限于硬盘IO的性能或者远程网络等原因获取可能非常的费时。会导致我们的程序非常缓慢,这在某些业务上是不能忍的!而缓存正是解决这类问题的神器!
当然也并不是说你用了缓存你的系统就一定会变快,建议在用之前看一下使用缓存的9大误区(上) 使用缓存的9大误区(下)
缓存在很多系统和架构中都用广泛的应用,例如:
- CPU缓存
- 操作系统缓存
- HTTP缓存
- 数据库缓存
- 静态文件缓存
- 本地缓存
- 分布式缓存
可以说在计算机和网络领域,缓存是无处不在的。可以这么说,只要有硬件性能不对等,涉及到网络传输的地方都会有缓存的身影。
缓存总体可分为两种 集中式缓存 和 分布式缓存
“集中式缓存"与"分布式缓存"的区别其实就在于“集中”与"非集中"的概念,其对象可能是服务器、内存条、硬盘等。比如:
1.服务器版本:
- 缓存集中在一台服务器上,为集中式缓存。
- 缓存分散在不同的服务器上,为分布式缓存。
2.内存条版本:
- 缓存集中在一台服务器的一条内存条上,为集中式缓存。
- 缓存分散在一台服务器的不同内存条上,为分布式缓存。
3.硬盘版本:
- 缓存集中在一台服务器的一个硬盘上,为集中式缓存。
- 缓存分散在一台服务器的不同硬盘上,为分布式缓存。
想了解分布式缓存可以看一下浅谈分布式缓存那些事儿。
这是几个当前比较流行的java 分布式缓存框架5个强大的Java分布式缓存框架推荐。
而我们今天要讲的是集中式内存缓存guava cache,这是当前我们项目正在用的缓存工具,研究一下感觉还蛮好用的。当然也有很多其他工具,还是看个人喜欢。oschina上面也有很多类似开源的java缓存框架
正文
Guava Cache与ConcurrentMap很相似,但也不完全一样。最基本的区别是ConcurrentMap会一直保存所有添加的元素,直到显式地移除。相对地,Guava Cache为了限制内存占用,通常都设定为自动回收元素。在某些场景下,尽管LoadingCache 不回收元素,它也是很有用的,因为它会自动加载缓存。
Guava Cache是在内存中缓存数据,相比较于数据库或redis存储,访问内存中的数据会更加高效。Guava官网介绍,下面的这几种情况可以考虑使用Guava Cache:
愿意消耗一些内存空间来提升速度。
预料到某些键会被多次查询。
缓存中存放的数据总量不会超出内存容量。
所以,可以将程序频繁用到的少量数据存储到Guava Cache中,以改善程序性能。下面对Guava Cache的用法进行详细的介绍。
构建缓存对象
接口Cache代表一块缓存,它有如下方法:
1 public interface Cache<K, V> {
2 V get(K key, Callable<? extends V> valueLoader) throws ExecutionException;
3
4 ImmutableMap<K, V> getAllPresent(Iterable<?> keys);
5
6 void put(K key, V value);
7
8 void putAll(Map<? extends K, ? extends V> m);
9
10 void invalidate(Object key);
11
12 void invalidateAll(Iterable<?> keys);
13
14 void invalidateAll();
15
16 long size();
17
18 CacheStats stats();
19
20 ConcurrentMap<K, V> asMap();
21
22 void cleanUp();
23 }
可以通过CacheBuilder类构建一个缓存对象,CacheBuilder类采用builder设计模式,它的每个方法都返回CacheBuilder本身,直到build方法被调用。构建一个缓存对象代码如下。
1 public class StudyGuavaCache {
2 public static void main(String[] args) {
3 Cache<String,String> cache = CacheBuilder.newBuilder().build();
4 cache.put("word","Hello Guava Cache");
5 System.out.println(cache.getIfPresent("word"));
6 }
7 }
上面的代码通过CacheBuilder.newBuilder().build()这句代码创建了一个Cache缓存对象,并在缓存对象中存储了key为word,value为Hello Guava Cache的一条记录。可以看到Cache非常类似于JDK中的Map,但是相比于Map,Guava Cache提供了很多更强大的功能。
get(K)
方法。这个方法要么返回已经缓存的值,要么使用CacheLoader向缓存原子地加载新值(通过load(String key)
方法加载)。由于CacheLoader可能抛出异常,LoadingCache.get(K)
也声明抛出ExecutionException异常。如果你定义的CacheLoader没有声明任何检查型异常,则可以通过getUnchecked(K)
查找缓存;但必须注意,一旦CacheLoader声明了检查型异常,就不可以调用getUnchecked(K)
。1 LoadingCache<Key, Value> cache = CacheBuilder.newBuilder()
2 .build(
3 new CacheLoader<Key, Value>() {
4 public Value load(Key key) throws AnyException {
5 return createValue(key);
6 }
7 });
8 ...
9 try {
10 return cache.get(key);
11 } catch (ExecutionException e) {
12 throw new OtherException(e.getCause());
13 }
设置最大存储
Guava Cache可以在构建缓存对象时指定缓存所能够存储的最大记录数量。当Cache中的记录数量达到最大值后再调用put方法向其中添加对象,Guava会先从当前缓存的对象记录中选择一条删除掉,腾出空间后再将新的对象存储到Cache中。
1 public class StudyGuavaCache {
2 public static void main(String[] args) {
3 Cache<String,String> cache = CacheBuilder.newBuilder()
4 .maximumSize(2)
5 .build();
6 cache.put("key1","value1");
7 cache.put("key2","value2");
8 cache.put("key3","value3");
9 System.out.println("第一个值:" + cache.getIfPresent("key1"));
10 System.out.println("第二个值:" + cache.getIfPresent("key2"));
11 System.out.println("第三个值:" + cache.getIfPresent("key3"));
12 }
13 }
上面代码在构造缓存对象时,通过CacheBuilder类的maximumSize方法指定Cache最多可以存储两个对象,然后调用Cache的put方法向其中添加了三个对象。程序执行结果如下图所示,可以看到第三条对象记录的插入,导致了第一条对象记录被删除。
设置过期时间
在构建Cache对象时,可以通过CacheBuilder类的expireAfterAccess和expireAfterWrite两个方法为缓存中的对象指定过期时间,过期的对象将会被缓存自动删除。其中,expireAfterWrite方法指定对象被写入到缓存后多久过期,expireAfterAccess指定对象多久没有被访问后过期。
1 public class StudyGuavaCache {
2 public static void main(String[] args) throws InterruptedException {
3 Cache<String,String> cache = CacheBuilder.newBuilder()
4 .maximumSize(2)
5 .expireAfterWrite(3,TimeUnit.SECONDS)
6 .build();
7 cache.put("key1","value1");
8 int time = 1;
9 while(true) {
10 System.out.println("第" + time++ + "次取到key1的值为:" + cache.getIfPresent("key1"));
11 Thread.sleep(1000);
12 }
13 }
14 }
上面的代码在构造Cache对象时,通过CacheBuilder的expireAfterWrite方法指定put到Cache中的对象在3秒后会过期。在Cache对象中存储一条对象记录后,每隔1秒读取一次这条记录。程序运行结果如下图所示,可以看到,前三秒可以从Cache中获取到对象,超过三秒后,对象从Cache中被自动删除。
下面代码是expireAfterAccess的例子。
1 public class StudyGuavaCache {
2 public static void main(String[] args) throws InterruptedException {
3 Cache<String,String> cache = CacheBuilder.newBuilder()
4 .maximumSize(2)
5 .expireAfterAccess(3,TimeUnit.SECONDS)
6 .build();
7 cache.put("key1","value1");
8 int time = 1;
9 while(true) {
10 Thread.sleep(time*1000);
11 System.out.println("睡眠" + time++ + "秒后取到key1的值为:" + cache.getIfPresent("key1"));
12 }
13 }
14 }
通过CacheBuilder的expireAfterAccess方法指定Cache中存储的对象如果超过3秒没有被访问就会过期。while中的代码每sleep一段时间就会访问一次Cache中存储的对象key1,每次访问key1之后下次sleep的时间会加长一秒。程序运行结果如下图所示,从结果中可以看出,当超过3秒没有读取key1对象之后,该对象会自动被Cache删除。
也可以同时用expireAfterAccess和expireAfterWrite方法指定过期时间,这时只要对象满足两者中的一个条件就会被自动过期删除。
弱引用
可以通过weakKeys和weakValues方法指定Cache只保存对缓存记录key和value的弱引用。这样当没有其他强引用指向key和value时,key和value对象就会被垃圾回收器回收。
1 public class StudyGuavaCache {
2 public static void main(String[] args) throws InterruptedException {
3 Cache<String,Object> cache = CacheBuilder.newBuilder()
4 .maximumSize(2)
5 .weakValues()
6 .build();
7 Object value = new Object();
8 cache.put("key1",value);
9
10 value = new Object();//原对象不再有强引用
11 System.gc();
12 System.out.println(cache.getIfPresent("key1"));
13 }
14 }
上面代码的打印结果是null。构建Cache时通过weakValues方法指定Cache只保存记录值的一个弱引用。当给value引用赋值一个新的对象之后,就不再有任何一个强引用指向原对象。System.gc()触发垃圾回收后,原对象就被清除了。
显示清除
可以调用Cache的invalidateAll或invalidate方法显示删除Cache中的记录。invalidate方法一次只能删除Cache中一个记录,接收的参数是要删除记录的key。invalidateAll方法可以批量删除Cache中的记录,当没有传任何参数时,invalidateAll方法将清除Cache中的全部记录。invalidateAll也可以接收一个Iterable类型的参数,参数中包含要删除记录的所有key值。下面代码对此做了示例。
1 public class StudyGuavaCache {
2 public static void main(String[] args) throws InterruptedException {
3 Cache<String,String> cache = CacheBuilder.newBuilder().build();
4 Object value = new Object();
5 cache.put("key1","value1");
6 cache.put("key2","value2");
7 cache.put("key3","value3");
8
9 List<String> list = new ArrayList<String>();
10 list.add("key1");
11 list.add("key2");
12
13 cache.invalidateAll(list);//批量清除list中全部key对应的记录
14 System.out.println(cache.getIfPresent("key1"));
15 System.out.println(cache.getIfPresent("key2"));
16 System.out.println(cache.getIfPresent("key3"));
17 }
18 }
代码中构造了一个集合list用于保存要删除记录的key值,然后调用invalidateAll方法批量删除key1和key2对应的记录,只剩下key3对应的记录没有被删除。
移除监听器
可以为Cache对象添加一个移除监听器,这样当有记录被删除时可以感知到这个事件。
1 public class StudyGuavaCache {
2 public static void main(String[] args) throws InterruptedException {
3 RemovalListener<String, String> listener = new RemovalListener<String, String>() {
4 public void onRemoval(RemovalNotification<String, String> notification) {
5 System.out.println("[" + notification.getKey() + ":" + notification.getValue() + "] is removed!");
6 }
7 };
8 Cache<String,String> cache = CacheBuilder.newBuilder()
9 .maximumSize(3)
10 .removalListener(listener)
11 .build();
12 Object value = new Object();
13 cache.put("key1","value1");
14 cache.put("key2","value2");
15 cache.put("key3","value3");
16 cache.put("key4","value3");
17 cache.put("key5","value3");
18 cache.put("key6","value3");
19 cache.put("key7","value3");
20 cache.put("key8","value3");
21 }
22 }
removalListener方法为Cache指定了一个移除监听器,这样当有记录从Cache中被删除时,监听器listener就会感知到这个事件。程序运行结果如下图所示。
自动加载
Cache的get方法有两个参数,第一个参数是要从Cache中获取记录的key,第二个记录是一个Callable对象。当缓存中已经存在key对应的记录时,get方法直接返回key对应的记录。如果缓存中不包含key对应的记录,Guava会启动一个线程执行Callable对象中的call方法,call方法的返回值会作为key对应的值被存储到缓存中,并且被get方法返回。下面是一个多线程的例子:
1 public class StudyGuavaCache {
2
3 private static Cache<String,String> cache = CacheBuilder.newBuilder()
4 .maximumSize(3)
5 .build();
6
7 public static void main(String[] args) throws InterruptedException {
8
9 new Thread(new Runnable() {
10 public void run() {
11 System.out.println("thread1");
12 try {
13 String value = cache.get("key", new Callable<String>() {
14 public String call() throws Exception {
15 System.out.println("load1"); //加载数据线程执行标志
16 Thread.sleep(1000); //模拟加载时间
17 return "auto load by Callable";
18 }
19 });
20 System.out.println("thread1 " + value);
21 } catch (ExecutionException e) {
22 e.printStackTrace();
23 }
24 }
25 }).start();
26
27 new Thread(new Runnable() {
28 public void run() {
29 System.out.println("thread2");
30 try {
31 String value = cache.get("key", new Callable<String>() {
32 public String call() throws Exception {
33 System.out.println("load2"); //加载数据线程执行标志
34 Thread.sleep(1000); //模拟加载时间
35 return "auto load by Callable";
36 }
37 });
38 System.out.println("thread2 " + value);
39 } catch (ExecutionException e) {
40 e.printStackTrace();
41 }
42 }
43 }).start();
44 }
45 }
这段代码中有两个线程共享同一个Cache对象,两个线程同时调用get方法获取同一个key对应的记录。由于key对应的记录不存在,所以两个线程都在get方法处阻塞。此处在call方法中调用Thread.sleep(1000)模拟程序从外存加载数据的时间消耗。代码的执行结果如下图:
从结果中可以看出,虽然是两个线程同时调用get方法,但只有一个get方法中的Callable会被执行(没有打印出load2)。Guava可以保证当有多个线程同时访问Cache中的一个key时,如果key对应的记录不存在,Guava只会启动一个线程执行get方法中Callable参数对应的任务加载数据存到缓存。当加载完数据后,任何线程中的get方法都会获取到key对应的值。
统计信息
可以对Cache的命中率、加载数据时间等信息进行统计。在构建Cache对象时,可以通过CacheBuilder的recordStats方法开启统计信息的开关。开关开启后Cache会自动对缓存的各种操作进行统计,调用Cache的stats方法可以查看统计后的信息。
1 public class StudyGuavaCache {
2 public static void main(String[] args) throws InterruptedException {
3 Cache<String,String> cache = CacheBuilder.newBuilder()
4 .maximumSize(3)
5 .recordStats() //开启统计信息开关
6 .build();
7 cache.put("key1","value1");
8 cache.put("key2","value2");
9 cache.put("key3","value3");
10 cache.put("key4","value4");
11
12 cache.getIfPresent("key1");
13 cache.getIfPresent("key2");
14 cache.getIfPresent("key3");
15 cache.getIfPresent("key4");
16 cache.getIfPresent("key5");
17 cache.getIfPresent("key6");
18
19 System.out.println(cache.stats()); //获取统计信息
20 }
21 }
程序执行结果如下图所示:
这些统计信息对于调整缓存设置是至关重要的,在性能要求高的应用中应该密切关注这些数据
LoadingCache
LoadingCache是Cache的子接口,相比较于Cache,当从LoadingCache中读取一个指定key的记录时,如果该记录不存在,则LoadingCache可以自动执行加载数据到缓存的操作。LoadingCache接口的定义如下:
1 public interface LoadingCache<K, V> extends Cache<K, V>, Function<K, V> {
2
3 V get(K key) throws ExecutionException;
4
5 V getUnchecked(K key);
6
7 ImmutableMap<K, V> getAll(Iterable<? extends K> keys) throws ExecutionException;
8
9 V apply(K key);
10
11 void refresh(K key);
12
13 @Override
14 ConcurrentMap<K, V> asMap();
15 }
与构建Cache类型的对象类似,LoadingCache类型的对象也是通过CacheBuilder进行构建,不同的是,在调用CacheBuilder的build方法时,必须传递一个CacheLoader类型的参数,CacheLoader的load方法需要我们提供实现。当调用LoadingCache的get方法时,如果缓存不存在对应key的记录,则CacheLoader中的load方法会被自动调用从外存加载数据,load方法的返回值会作为key对应的value存储到LoadingCache中,并从get方法返回。
1 public class StudyGuavaCache {
2 public static void main(String[] args) throws ExecutionException {
3 CacheLoader<String, String> loader = new CacheLoader<String, String> () {
4 public String load(String key) throws Exception {
5 Thread.sleep(1000); //休眠1s,模拟加载数据
6 System.out.println(key + " is loaded from a cacheLoader!");
7 return key + "'s value";
8 }
9 };
10
11 LoadingCache<String,String> loadingCache = CacheBuilder.newBuilder()
12 .maximumSize(3)
13 .build(loader);//在构建时指定自动加载器
14
15 loadingCache.get("key1");
16 loadingCache.get("key2");
17 loadingCache.get("key3");
18 }
19 }
程序执行结果如下图所示:
【Guava】Guava Cache用法的更多相关文章
- Google Guava之--cache
一.简介 Google Guava包含了Google的Java项目许多依赖的库,如:集合 [collections] .缓存 [caching] .原生类型支持 [primitives support ...
- guava学习--cache
转载:http://outofmemory.cn/java/guava/cache/how-to-use-guava-cache http://www.cnblogs.com/parryyang/ ...
- SpringBoot 遇到 com.google.guava » guava 组件运行异常问题修复方案
环境 Apache Maven : 3.5.4 org.springframework.boot » spring-boot-starter-parent : 2.0.3.RELEASE io.spr ...
- C#中Cache用法
C#中Cache用法 Cache 是分配在服务器上的一个公共的内存片,所谓公共指的cache只要一创建是任何一个客户端浏览器都可以通过后台代码访问到它,它面向的是所有用户,相对而言sessio ...
- Guava Cache用法介绍<转>
Guava Cache是在内存中缓存数据,相比较于数据库或redis存储,访问内存中的数据会更加高效.Guava官网介绍,下面的这几种情况可以考虑使用Guava Cache: 愿意消耗一些内存空间来提 ...
- Guava Cache用法介绍
背景 缓存的主要作用是暂时在内存中保存业务系统的数据处理结果,并且等待下次访问使用.在日长开发有很多场合,有一些数据量不是很大,不会经常改动,并且访问非常频繁.但是由于受限于硬盘IO的性能或者远程网络 ...
- Google Guava的splitter用法
google的guava库是个很不错的工具库,这次来学习其spliiter的用法,它是一个专门用来 分隔字符串的工具类,其中有四种用法,分别来小结 1 基本用法: String str = " ...
- guava collection/cache初探
写了上面一篇,看了点eventbus相关的guava代码后,发现里面用到了很多其他guava包里的方法,所以顺着看一下,比如之前用到的map都是guava自己的 Multimap:可以包含有几个重复K ...
- Zookeeper + Guava loading cache 实现分布式缓存
1. 概述 项目中,创建的活动内容存入redis,然后需要用到活动内容的地方,从redis去取,然后参与计算. 活动数据的一个特点是更新不频繁.数据量不大.因为项目部署一般是多机器.多实例,除了red ...
随机推荐
- 微信小程序中的自定义组件 以及 相关的坑
Step1 我们初始化一个小程序(本示例基础版本库为 1.7 ),删掉里面的示例代码,并新建一个 components 文件夹,用于存放我们以后开发中的所用组件,今天我们的目的是实现一个 首页 组件, ...
- boost unordered
Boost.Unordered provides the classes boost::unordered_set, boost::unordered_multiset, boost::unorder ...
- ceph-状态监测-脚本
http://www.tang-lei.com/2018/06/05/ceph-%E7%8A%B6%E6%80%81%E7%9B%91%E6%B5%8B-%E8%84%9A%E6%9C%AC/ 为了能 ...
- php chunk_split()函数 语法
php chunk_split()函数 语法 作用:把字符串分割为一连串更小的部分.东莞大理石平板 语法:chunk_split(string,length,end) 参数: 参数 描述 string ...
- Oracle or Question Solve(一)
Oracle查看版本命令:select * from v$version; ORACLE_BASE和ORACLE_HOME路径查看su - oracleecho $ORACLE_BASEecho $O ...
- excel 中相乘函数
excel 中相乘函数 “PRODUCT”并且是公式的框框,格式要是 常规,不能是文本
- BZOJ 4484: [Jsoi2015]最小表示(拓扑排序+bitset)
传送门 解题思路 \(bitset\)维护连通性,给每个点开个\(bitset\),第\(i\)位为\(1\)则表示与第\(i\)位联通.算答案时显然要枚举每条边,而枚举边的顺序需要贪心,一个点先到达 ...
- python的迭代器(转自廖雪峰老师python基础)
我们已经知道,可以直接作用于for循环的数据类型有以下几种:一类是集合数据类型,如list.tuple.dict.set.str等:一类是generator,包括生成器和带yield的generato ...
- (转)运行jar应用程序引用其他jar包的四种方法 -- ClassLoader应用
转:http://longdick.iteye.com/blog/332580 大家都知道一个java应用项目可以打包成一个jar,当然你必须指定一个拥有main函数的main class作为你这个j ...
- 【转】 Linux 的目录详解 (Linux基础一)
前言 转自: http://c.biancheng.net/view/2833.html 进行了一些提炼和修改. 学习 Linux,不仅限于学习各种命令,了解整个 Linux 文件系统的目录结构以及各 ...