redis 超时失效key 的监听触发使用
redis自2.8.0之后版本提供Keyspace Notifications功能,允许客户订阅Pub / Sub频道,以便以某种方式接收影响Redis数据集的事件。
可能收到的事件的例子如下:
所有影响给定键的命令。
所有接收LPUSH操作的密钥。
所有密钥在数据库中过期0。
因为 Redis 目前的订阅与发布功能采取的是发送即忘(fire and forget)策略, 所以如果你的程序需要可靠事件通知(reliable notification of events), 那么目前的键空间通知可能并不适合你:当订阅事件的客户端断线时, 它会丢失所有在断线期间分发给它的事件。并不能确保消息送达。未来有计划允许更可靠的事件传递,但可能这将在更一般的层面上解决,或者为Pub / Sub本身带来可靠性,或者允许Lua脚本拦截Pub / Sub消息来执行诸如推送将事件列入清单。
事件类型
对于每个修改数据库的操作,键空间通知都会发送两种不同类型的事件消息:keyspace 和 keyevent。以 keyspace 为前缀的频道被称为键空间通知(key-space notification), 而以 keyevent 为前缀的频道则被称为键事件通知(key-event notification)。
事件是用 __keyspace@DB__:KeyPattern 或者 __keyevent@DB__:OpsType 的格式来发布消息的。
DB表示在第几个库;KeyPattern则是表示需要监控的键模式(可以用通配符,如:__key*__:*);OpsType则表示操作类型。因此,如果想要订阅特殊的Key上的事件,应该是订阅keyspace。
比如说,对 0 号数据库的键 mykey 执行 DEL 命令时, 系统将分发两条消息, 相当于执行以下两个 PUBLISH 命令:
PUBLISH __keyspace@0__:sampleKey del
PUBLISH __keyevent@0__:del sampleKey
订阅第一个频道 __keyspace@0__:mykey 可以接收 0 号数据库中所有修改键 mykey 的事件, 而订阅第二个频道 __keyevent@0__:del
则可以接收 0 号数据库中所有执行 del 命令的键。
开启配置
开启配置
键空间通知通常是不启用的,因为这个过程会产生额外消耗。所以在使用该特性之前,请确认一定是要用这个特性的,然后修改配置文件,或使用config配置。相关配置项如下:
字符 | 发送通知 |
---|---|
K | 键空间通知,所有通知以 keyspace@ 为前缀,针对Key |
E | 键事件通知,所有通知以 keyevent@ 为前缀,针对event |
g | DEL 、 EXPIRE 、 RENAME 等类型无关的通用命令的通知 |
$ | 字符串命令的通知 |
l | 列表命令的通知 |
s | 集合命令的通知 |
h | 哈希命令的通知 |
z | 有序集合命令的通知 |
x | 过期事件:每当有过期键被删除时发送 |
e | 驱逐(evict)事件:每当有键因为 maxmemory 政策而被删除时发送 |
A | 参数 g$lshzxe 的别名,相当于是All |
输入的参数中至少要有一个 K 或者 E , 否则的话, 不管其余的参数是什么, 都不会有任何通知被分发。上表中斜体的部分为通用的操作或者事件,而黑体则表示特定数据类型的操作。配置文件中修改 notify-keyspace-events “Kx”,注意:这个双引号是一定要的,否则配置不成功,启动也不报错。例如,“Kx”表示想监控某个Key的失效事件。
也可以通过config配置:CONFIG set notify-keyspace-events Ex (但非持久化)
Redis 使用以下两种方式删除过期的键:
1.当一个键被访问时,程序会对这个键进行检查,如果键已经过期,那么该键将被删除。
2.底层系统会在后台查找并删除那些过期的键,从而处理那些已经过期、但是不会被访问到的键。
当过期键被以上两个程序的任意一个发现、 并且将键从数据库中删除时, Redis 会产生一个 expired 通知。
Redis 并不保证生存时间(TTL)变为 0 的键会立即被删除: 如果程序没有访问这个过期键, 或者带有生存时间的键非常多的话,
那么在键的生存时间变为 0 , 直到键真正被删除这中间,
可能会有一段比较显著的时间间隔。
因此, Redis 产生 expired 通知的时间为过期键被删除的时候, 而不是键的生存时间变为 0 的时候。
由于通知收到的是redis key,value已经过期,无法收到,所以需要在key上标记业务数据。
redis 超时失效key 的监听触发
1. 事件通过 Redis 的订阅与发布功能(pub/sub)来进行分发,故需要订阅 __keyevent@0__:expired 通道
0表示db0 根据自己的dbindex选择合适的数字
2. 修改 redis.conf 文件
修改 notify-keyspace-events Ex
# K 键空间通知,以__keyspace@<db>__为前缀
# E 键事件通知,以__keysevent@<db>__为前缀
# g del , expipre , rename 等类型无关的通用命令的通知, ...
# $ String命令
# l List命令
# s Set命令
# h Hash命令
# z 有序集合命令
# x 过期事件(每次key过期时生成)
# e 驱逐事件(当key在内存满了被清除时生成)
# A g$lshzxe的别名,因此”AKE”意味着所有的事件
3. 重启redis , 即可测试失效事件的触发, 监听获取的值为 key
<java>
4. 首先需要一个消息监听器类 RedisSubListener
RedisSubListener.java
package cn.maitian.maimai.cache.message.sub; import cn.maitian.bss.duty.privilege.utils.SpringContextHolder;
import cn.maitian.maimai.cache.client.MaimaiJedis;
import cn.maitian.maimai.cache.keys.RedisKeys;
import cn.maitian.maimai.cache.model.RedisKeyspaceNotifiRecord;
import cn.maitian.maimai.cache.service.RedisKeyspaceNotifiRecordIService;
import cn.maitian.maimai.core.exception.AppSysException;
import cn.maitian.maimai.core.util.AppStringUtils;
import cn.maitian.maimai.schedule.utils.JobUtils;
import com.alibaba.fastjson.JSONObject;
import org.apache.log4j.Logger;
import redis.clients.jedis.JedisPubSub; import java.util.Date; /**
* Redis 发布订阅模型(Pub/Sub)的订阅服务监听器
*
* @author
* @version V1.0
* @company
* @date
*/
public class RedisSubListener extends JedisPubSub { /**
* 日志
*/
protected final Logger logger = Logger.getLogger(getClass()); private RedisKeyspaceNotifiRecordIService redisKeyspaceNotifiRecordIService; /**
*
* @Title: onMessage
* @Description: 取得订阅的消息后的处理
* @param channel
* 频道
* @param message
* 消息内容
*
* @author
* @date
*/
@Override
public void onMessage(String channel, String message) {
logger.info("channel{" + channel + "}message{" + message + "}");
} /**
*
* @Title: onPMessage
* @Description: 取得按表达式的方式订阅的消息后的处理
*
* @author
* @date
*/
public void onPMessage(String pattern, String channel, String message) {
logger.info("Redis订阅监听超时通知开始pattern{" + pattern + "}channel{" + channel + "}message{" + message + "}");
long starTime = System.currentTimeMillis();
if (AppStringUtils.isEmpty(message)) {
logger.info("Redis订阅监听超时通知,message为空");
return;
}
RedisKeyspaceNotifiRecord record = null;
String keyId;
try {
if (message.startsWith(RedisKeys.REDIS_LOCK_KEY_STRING)) {
logger.info("Redis订阅监听超时通知,此key值不需要进行订阅处理");
return;
}
keyId = message.substring(message.lastIndexOf(":") + 1);
long result = MaimaiJedis.setnx(RedisKeys.REDIS_LOCK_KEY_STRING + keyId,RedisKeys.REDIS_LOCK_KEY_STRING + keyId);
if (result==0) {
logger.info("Redis订阅监听超时通知,此key已被设置,请勿重复设置");
return;
}
record = redisKeyspaceNotifiRecordIService.findById(keyId);
if (record == null) {
// throw new AppSysException("Redis订阅监听超时通知,找不到记录id{" + keyId + "}");
logger.error("Redis订阅监听超时通知,找不到记录id{" + keyId + "}");
return;
}
record.setBeginTime(new Date());
if (AppStringUtils.isEmpty(record.getServiceClass())) {
throw new AppSysException("Redis订阅监听超时通知,RedisKeyspaceNotifiRecord中必须包含ServiceClass");
}
Object object = SpringContextHolder.getBean(Class.forName(record.getServiceClass()));
String serviceMethod = record.getServiceMethod();
Object[] params;
if (AppStringUtils.isEmpty(record.getServiceParams())) {
params = new Object[] {};
} else {
params = JSONObject.parseArray(record.getServiceParams()).toArray();
}
if (object != null && !AppStringUtils.isEmpty(serviceMethod)) {
JobUtils.invokeMethod(object, serviceMethod, params);
record.setStatus(RedisKeyspaceNotifiRecord.STATUS_SUCCESS_EXECUTE);// 执行成功
}
} catch (AppSysException e) {
if (record != null) {
record.setStatus(RedisKeyspaceNotifiRecord.STATUS_FAIL_EXECUTE);// 执行失败
}
e.printStackTrace();
logger.info("Redis订阅监听超时通知,出现异常{" + e.getCode() + "}", e);
} catch (Exception e) {
if (record != null) {
record.setStatus(RedisKeyspaceNotifiRecord.STATUS_FAIL_EXECUTE);// 执行失败
}
e.printStackTrace();
logger.info("Redis订阅监听超时通知,出现异常", e);
} finally {
if (record != null) {
record.setEndTime(new Date());
redisKeyspaceNotifiRecordIService.saveOrUpdate(record);
}
}
long endTime = new Date().getTime();
logger.info("Redis订阅监听超时通知完成pattern{" + pattern + "}channel{" + channel + "}message{" + message + "}共耗时{"
+ (endTime - starTime) / 1000 + "}秒");
} /**
* @param redisKeyspaceNotifiRecordIService
* the redisKeyspaceNotifiRecordIService to set
*/
public void setRedisKeyspaceNotifiRecordIService(
RedisKeyspaceNotifiRecordIService redisKeyspaceNotifiRecordIService) {
this.redisKeyspaceNotifiRecordIService = redisKeyspaceNotifiRecordIService;
} }
5.Redis订阅指定的频道(此类用于订阅Redis的键值超时事件)
RedisKeySpaceNotification.java
package cn.maitian.maimai.cache.message.sub; import cn.maitian.maimai.cache.client.MaimaiJedis;
import org.apache.log4j.Logger;
import org.springframework.beans.factory.DisposableBean;
import org.springframework.beans.factory.InitializingBean;
import redis.clients.jedis.Jedis;
import redis.clients.jedis.JedisPool; /**
* Redis订阅指定的频道(此类用于订阅Redis的键值超时事件)
*
* @author
* @version V1.0
* @company
* @date
*/
public class RedisKeySpaceNotification implements InitializingBean, DisposableBean { /**
* 是否开启Redis键值超时通知服务(默认打开)
*/
private static boolean isRedisActiveKeySpaceNotification = true; /**
* 日志
*/
protected final Logger logger = Logger.getLogger(getClass()); private RedisSubListener redisSubListener; @Override
public void destroy() throws Exception {
// 销毁
} @Override
public void afterPropertiesSet() throws Exception {
if (isRedisActiveKeySpaceNotification) {
logger.error("Redis订阅的键值超时事件已启动-----------------------------------");
JedisPool jedisPool = MaimaiJedis.getMaiMaiJedisPool();
final Jedis jedis = jedisPool.getResource();
new Thread(new Runnable() {
@Override
public void run() {
jedis.psubscribe(redisSubListener, "__keyevent@*__:expired");
}
}).start();
}
} /**
* @param redisSubListener
* the redisSubListener to set
*/
public void setRedisSubListener(RedisSubListener redisSubListener) {
this.redisSubListener = redisSubListener;
}
}
redis 超时失效key 的监听触发使用的更多相关文章
- redis 超时失效key 的监听触发
1. 事件通过 Redis 的订阅与发布功能(pub/sub)来进行分发,故需要订 阅 __keyevent@0__:expired 通道 0表示db0 根据自己的dbindex选择合适的数字 2. ...
- JAVA实现redis超时失效key 的监听触发
过期事件通过Redis的订阅与发布功能(pub/sub)来进行分发. 而对超时的监听呢,并不需要自己发布,只有修改配置文件redis.conf中的:notify-keyspace-events Ex, ...
- redis过期事件,swoole监听
$serv = new Swoole\Server('0.0.0.0', 9501, SWOOLE_BASE, SWOOLE_SOCK_TCP); $serv->set(array( 'work ...
- waypoint+animate元素滚动监听触发插件实现页面动画效果
最近在做一个官网类型滚动加载动画,使用到waypoint监听事件插件和animate动画样式,两者结合完美实现向下滚动加载动画,但是没有做向上滚动撤消动画,留待以后有空研究 首先来介绍下jquery. ...
- layui 事件监听触发
1:监听select 改变 <!-- 不用form 用div也可以 --> <form class="layui-form"> <div class= ...
- java中的key事件监听机制
package com.at221; import java.awt.event.KeyAdapter; import java.awt.event.KeyEvent; import javax.sw ...
- Redis集群下过期key监听
1. 前言 在使用redis集群时,发现过期key始终监听不到.网上也没有现成的解决方案.于是想,既然不能监听集群,那我可以建立多个redis连接,分别对每个redis的key过期进行监听.以上做法可 ...
- spring boot 实现redis 的key的过期监听,执行自己的业务
最近几天进一步了解了一下redis,发现了key的过期监听功能,实现方式如下: 在redis的配置文件 redis.conf 中找到"EVENT NOTIFICATION"模块, ...
- 配置redis开机自启动和监听
redis安装好后,每次手动启动很不方便,配置开机自启动. 方法一:设置启动命令到/etc/rc.d/rc.local rc.local文件是系统全局脚本文件,会在其他开机进程脚本文件执行完毕后执行该 ...
随机推荐
- 使用 visual studio 2019 社区版打开touchgfx工程注意项
@2019-09-23 [环境] touchgfx designer 4.10.0 visual studio 2019 社区版 [问题] #error 1 使用 visual studio 2019 ...
- sql 分页查询 (每次6行 )
-- 对比 数据 是否 相同 select * from [dbo].[ProjecrInfo] where Project_state='已审核' -- 查询 已经 审核 有多少数据 -- 每次 ...
- PAT Basic 1084 外观数列 (20 分)
外观数列是指具有以下特点的整数序列: d, d1, d111, d113, d11231, d112213111, ... 它从不等于 1 的数字 d 开始,序列的第 n+1 项是对第 n 项的描述. ...
- Tensorflow目录
0.Tensorflow安装 1.创建会话,启动会话 2.变量 3.Fech_feed 4.线性回归 5.非线性回归 6.MNIST数据集简单分类 7.交叉熵 8.Dropout 9.正则化 10.优 ...
- integer == 号问题
integer a=123 integer b=123 integer c=250 integer d=250 a==b(true) c==d (false) Integer中把-128-127 缓存 ...
- 误删rpm命令的恢复方法
rpm命令不能用了,被依赖的yum也不能使用了, 恢复rpm命令无外乎重装, 重装方法1: 使用源码编译, 需要gcc ,cmake包,如果没装,悲剧了 重装方法2: 找一台,和出问题的这台同样系统 ...
- 解决安卓app在真机上的无法登录问题
和小伙伴用安卓做的app在模拟器上可以正常使用,但是变成apk发到手机上下载使用时,出现无法的登录问题,而且登录提示的错误出现一秒就消失了,无法看清. 于是找了一下老师帮忙,老师是通过在电脑主机上插入 ...
- Linux初始化脚本
以下脚本用于linux系统的初始化脚本,可以在服务器系统安装完毕之后立即执行.脚本结合各位大牛一些参数,已经在CentOS 5下通过. 使用方法:将其复制,保存为一个shell文件,比如init.sh ...
- MyEclipse6.5的速度性能优化大提速(转)
MyEclipse是Eclipse的插件,也是一款功能强大的J2EE集成开发环境,支持代码编写.配置.测试以及除错.现在看一下MyEclipse6.5版本的速度性能优化大提速.优化MyEclipse6 ...
- 在Google Maps 上点击标签后显示说明
JS如下: (function() { window.onload = function() { // Creating an object literal contain ...