Redis的Sorted-Sets排行榜功能实现
Redis的ZSet排行榜功能实现
1. 功能需求
类似给用户n张图片, 用户左滑不喜欢右滑喜欢。所以每个用户就会有一些喜欢的图片集合和不喜欢的图片集合。现在我们要做一个将按照一个算法将喜欢的排到前面。算法 ctr = (喜欢数+20)/ (喜欢数+不喜欢数+20),所有的内容按照这个算法的结果进行排行榜排序。
2. Redis sorts sets简介
Sorted-Sets和Sets类型极为相似,它们都是字符串的集合,都不允许重复的成员出现在一个Set中。它们之间的主要差别是Sorted-Sets中的每一个成员都会有一个分数(score)与之关联,Redis正是通过分数来为集合中的成员进行从小到大的排序。然而需要额外指出的是,尽管Sorted-Sets中的成员必须是唯一的,但是分数(score)却是可以重复的。
Sorted Sets是通过Skip List(跳跃表)和hash Table(哈希表)的双端口数据结构实现的,因此每次添加元素时,Redis都会执行O(log(N))操作。所以当我们要求排序的时候,Redis根本不需要做任何工作了,早已经全部排好序了。元素的分数可以随时更新。
3. 代码实现
本文主要通过redisTemplate来操作redis,当然也可以使用redis-client,看个人喜好。
首先写两个要用到的两个方法, 一个批量插入数据,一个获取排行榜Top n。
/**
* @Description: 批量添加zset数据
* @author mazhq
*/
public Long setBatchZSet(String key, Set<ZSetOperations.TypedTuple<Object>> typedTuples) {
try {
return redisTemplate.opsForZSet().add(key, typedTuples);
} catch (Exception e) {
logger.error("redis setZSet failed, key = " + key + "| error:" + e.getMessage(), e);
return 0L;
}
} /**
* @Description: 获取排行前面的数据
* @author mazhq
*/
public List<Object> getTopRankZSet(String key, int topCount) {
try {
Set<Object> range = redisTemplate.opsForZSet().reverseRange(key, 0, topCount);
return Arrays.asList(range.toArray());
} catch (Exception e) {
logger.error("redis getTopRankZSet failed, key = " + key + "| error:" + e.getMessage(), e);
return new ArrayList<>();
}
}
插入排行榜数据
/**
* @Description: 批量添加图片排行榜数据
* @author mazhq
*/
public void batchAddImageData(){
//获取喜欢和不喜欢的map数据 key是图片ID
Map<String, Integer> map = userBehaviorRecordManager.getQuickImageStatistic();
//获取所有图片列表
List<ImageConfigBean> imageConfigBeanList = quickImageConfigManager.getRealAllList();
Set<ZSetOperations.TypedTuple<Object>> tuples = new HashSet<>();
for (ImageConfigBean imageConfigResp : imageConfigBeanList) {
String likeKey = imageConfigResp.getGuid() + QuickConstant.LIKE;
String unLikeKey = imageConfigResp.getGuid() + QuickConstant.UNLIKE;
//ctr算法 以1000为统计精确维度 即精确到小数点后三位
double ctr = 1000d;
if (map.containsKey(likeKey) && map.containsKey(unLikeKey)) {
double total = (map.get(likeKey)).doubleValue() + map.get(unLikeKey).doubleValue() + 20d;
double ctrStatistic = (map.get(likeKey).doubleValue() + 20d) / total;
ctr = (double) Math.round(ctrStatistic * 1000);
}else if(!map.containsKey(likeKey) && map.containsKey(unLikeKey)){
double total = map.get(unLikeKey).doubleValue() + 20d;
double ctrStatistic = 20d / total;
ctr = (double) Math.round(ctrStatistic * 1000);
} DefaultTypedTuple<Object> tuple = new DefaultTypedTuple<>(imageConfigResp.getGuid() + "", ctr);
tuples.add(tuple);
} redisClient.setBatchZSet(RedisKeysManager.getMiniProgramSlideRankingKey(), tuples);
}
获取Top50排行榜数
/**
* @Description: 获取排行榜top50条记录
* @author mazhq
*/
@RequestMapping("/getTop50")
public String getTop50() {
List<Object> stringList = redisClient.getTopRankWithScoresZSet(RedisKeysManager.getMiniProgramSlideRankingKey(), 50);
return JSONObject.toJSONString(stringList);
}
其它集合操作方法
//单个增加集合内容
public boolean setSortedSet(String key, double score, Object value) {
try {
return redisTemplate.opsForZSet().add(key, value, score);
} catch (Exception e) {
logger.error("redis setSortedSet failed, key = " + key + "| error:" + e.getMessage(), e);
return false;
}
}
//单个增加分数
public double incrementScore(String key, double score, Object value) {
try {
return redisTemplate.opsForZSet().incrementScore(key, value, score);
} catch (Exception e) {
logger.error("redis incrementScore failed, key = " + key + "| error:" + e.getMessage(), e);
return 0.0;
}
}
//单个删除
public boolean delSortedSet(String key, Object... values) {
try {
long count = redisTemplate.opsForZSet().remove(key, values);
return count > 0;
} catch (Exception e) {
logger.error("redis delSortedSet failed, key = " + key + "| error:" + e.getMessage(), e);
return false;
}
}
4. 总结
新增or更新
//单个新增or更新
Boolean add(K key, V value, double score);
//批量新增or更新
Long add(K key, Set<TypedTuple<V>> tuples);
//使用加法操作分数
Double incrementScore(K key, V value, double delta);
删除
//通过key/value删除
Long remove(K key, Object... values); //通过排名区间删除
Long removeRange(K key, long start, long end); //通过分数区间删除
Long removeRangeByScore(K key, double min, double max);
查寻
//通过排名区间获取列表值集合
Set<V> range(K key, long start, long end); //通过排名区间获取列表值和分数集合
Set<TypedTuple<V>> rangeWithScores(K key, long start, long end); //通过分数区间获取列表值集合
Set<V> rangeByScore(K key, double min, double max); //通过分数区间获取列表值和分数集合
Set<TypedTuple<V>> rangeByScoreWithScores(K key, double min, double max); //通过Range对象删选再获取集合排行
Set<V> rangeByLex(K key, Range range); //通过Range对象删选再获取limit数量的集合排行
Set<V> rangeByLex(K key, Range range, Limit limit);
//获取个人排行
Long rank(K key, Object o); //获取个人分数
Double score(K key, Object o);
统计
//统计分数区间的人数
Long count(K key, double min, double max); //统计集合基数
Long zCard(K key);
基本整理了排行榜用到的所有方法,排行榜有这一篇文章够用了。同时大家注意当redis缓存被清空,如何重新计算排行榜相关数据,或者安排定时排行榜数据定时落地逻辑。
避免redis缓存出现问题导致系统瘫痪。
Redis的Sorted-Sets排行榜功能实现的更多相关文章
- Redis 命令 - Sorted Sets
ZADD key score member [score member ...] Add one or more members to a sorted set, or update its scor ...
- Redis 有序聚合实现排行榜功能
排行榜功能是一个很普遍的需求.使用 Redis 中有序集合的特性来实现排行榜是又好又快的选择.Redis有序集合非常适用于有序不重复数据的存储 一般排行榜都是有实效性的,比如“用户积分榜”.如果没有实 ...
- Redis实现排行榜功能(实战)
需求前段时间,做了一个世界杯竞猜积分排行榜.对世界杯64场球赛胜负平进行猜测,猜对+1分,错误+0分,一人一场只能猜一次.1.展示前一百名列表.2.展示个人排名(如:张三,您当前的排名106579). ...
- Redis实现世界杯排行榜功能(实战)
转载请注明出处:https://www.cnblogs.com/wenjunwei/p/9754346.html 需求 前段时间,做了一个世界杯竞猜积分排行榜.对世界杯64场球赛胜负平进行猜测,猜对+ ...
- 使用 Redis 的 sorted set 实现用户排行榜
要求:实现一个用户排行榜,用户数量有很多,排行榜存储的是用户玩游戏的分数,对排行榜的读取压力比较大,如何实现? 思路分析: 实现排行榜,可以考虑使用 Redis 的 zset 结构: 用户数量很多的话 ...
- 使用 Redis 实现排行榜功能
排行榜功能是一个很普遍的需求.使用 Redis 中有序集合的特性来实现排行榜是又好又快的选择. 一般排行榜都是有实效性的,比如“用户积分榜”.如果没有实效性一直按照总榜来排,可能榜首总是几个老用户,对 ...
- 使用 Redis 实现排行榜功能 (转载 https://segmentfault.com/a/1190000002694239)
排行榜功能是一个很普遍的需求.使用 Redis 中有序集合的特性来实现排行榜是又好又快的选择. 一般排行榜都是有实效性的,比如"用户积分榜".如果没有实效性一直按照总榜来排,可能榜 ...
- redis的有序集合(Sorted Sets)数据类型
和Sets相比,Sorted Sets增加了一个权重参数score,使得集合中的元素能够按score进行有序排列,比如一个存储全班同学成绩的Sorted Sets,其集合value可以是同学的学号,而 ...
- redis实现排行榜功能
目录 加入排行榜 操作排行榜 redis的zset可以很方便地用来实现排行榜功能,下面简单介绍python如何使用redis实现排行榜功能 加入排行榜 获取redis实例 import redis m ...
随机推荐
- 10-scrapy框架介绍
Scrapy 入门教程 Scrapy 是用 Python 实现的一个为了爬取网站数据.提取结构性数据而编写的应用框架. Scrapy 常应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中. 通 ...
- 失败zero
1127 系统玩崩溃了 分区助手调整c盘,导致自动进入快速启动然后疯狂boot网卡检测?还有测试中心? 查找错误initialization and establishing link,结论是bios ...
- Java设计模式:Flyweight(享元)模式
概念定义 享元(Flyweight)模式运用共享技术高效地支持大量细粒度对象的复用. 当系统中存在大量相似或相同的对象时,有可能会造成内存溢出等问题.享元模式尝试重用现有的同类对象,如果未找到匹配的对 ...
- 黄聪:不使用 webpack,vuejs 异步加载模板
webpack 打包不会玩,整了这么个小玩具 一段 vue 绑定代码,关键点在 gmallComponent 1.异步加载外部 vue 文件(非 .vue) 2.按一定规则拆分 template.sc ...
- Scala,Java,Python 3种语言编写Spark WordCount示例
首先,我先定义一个文件,hello.txt,里面的内容如下: hello sparkhello hadoophello flinkhello storm Scala方式 scala版本是2.11.8. ...
- win10 关闭 “在时间线中查看更多日期” 提示
在组策略中,禁用允许上传用户活动
- Python爬取上交所一年大盘数据
前言 文的文字及图片来源于网络,仅供学习.交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理. 作者: 半个码农2018 PS:如有需要Python学习资料的小伙伴可以加点 ...
- Zipkin客户端链路追踪源码解析
我们知道,Zipkin这个工具可以帮助我们收集分布式系统中各个系统之间的调用连关系,而且除了Servlet之外还能收集:MQ.线程池.WebSocket.Feign.Hystrix.RxJava.We ...
- react网页版聊天|仿微信、微博web版|react+pc端仿微信实例
一.项目介绍 基于react+react-dom+react-router-dom+redux+react-redux+webpack2.0+nodejs等技术混合开发的仿微信web端聊天室react ...
- CTF 入门笔记
站点:http://www.moctf.com/ web1:水题非常简单的题目,直接F12查看元素即可,在HTML代码中,flag被注释了. web2:水题 该题的核心 就是通过HTML代码对输入框进 ...