一、慢查询

找到 系统中瓶颈的命令

1. 客户端请求的生命周期:

①. 慢查询通常发生在第三阶段。

②. 客户端超时不一定是慢查询,但慢查询是客户端超时的一个可能因素。

2. 相关配置

慢查询命令会存放在一个先进先出的队列

查询队列的长度:

config get slowlog-max-len

默认值是 128,我们通常建议设置为 1000

config set slowlog-max-len=

查询慢查询的定义时长:

config get slowlog-log-slower-than

默认值是 10000 微秒= 10 毫秒,我们建议设置为 1 毫秒

config set slowlog-log-slower-than=

3. 相关命令

slowlog get [n] # 查询慢查询队列的 n 条
slowlog len # 获取慢查询队列长度
slowlog reset # 清空慢查询队列

二、pipeline 流水线

流水线是一个类似于 mget / mset 的一个批量操作。

区别在于 m 操作是 redis 原生的命令,他在执行队列中作为一个整体在排队。

而流水线是 Java 客户端的命令,在排队时会跟其他命令杂乱在一起排队,非原子性的。但返回时会一起返回。

1. Jedis 客户端直连:

Jedis jedis = new Jedis("127.0.0.1", 6379);
for (int i = 0; i < 100; i++) {
Pipeline pipeline = jedis.pipelined();
for (int j = i * 100; j < (i + 1) * 100; j++) {
pipeline.hset("hashkey:" + j, "field" + j, "value" + j);
}
pipeline.syncAndReturnAll();
}

2.  SpringBoot 提供的 RedisTemplate 客户端:

// 1 重写入参 RedisCallback 类的 doInRedis 方法
List<Object> list = redisTemplate.executePipelined((RedisConnection connection) -> { // 2 打开连接
connection.openPipeline(); // 3 要一次性执行的命令 // 3.1 一个 set 操作
connection.set("key1".getBytes(), "value1".getBytes()); // 3.2 一个 mSet 操作
Map<byte[], byte[]> tuple = new HashMap();
tuple.put("m_key1".getBytes(), "m_value1".getBytes());
tuple.put("m_key2".getBytes(), "m_value2".getBytes());
tuple.put("m_key3".getBytes(), "m_value3".getBytes());
connection.mSet(tuple); // 3.3 一个 get 操作
connection.get("m_key2".getBytes()); // 4 返回 null 即可
return null; }, RedisSerializer.string()); // 5 遍历结果
for (Object obj : list) {
System.out.println(String.valueOf(obj));
}

执行结果:

三、消息队列与发布订阅

参考博客:https://www.cnblogs.com/qlqwjy/p/9763754.html

在 Redis 中,发布订阅与消息队列属于不同的概念。

消息队列:Redis 的列表类型天然支持消息队列,并且支持阻塞式读取。多个消费者之间需要抢一个消息。

发布订阅:多个消费者都可以消费到同一条消息,但是无法订阅以往的消息。

1. 消息队列

我们重新熟悉一下 Redis 的列表类型相关 API。

①. 从左边插入,从右边取出

127.0.0.1:> lpush mylist a b c
(integer)
127.0.0.1:> lrange mylist -
) "c"
) "b"
) "a"
127.0.0.1:> rpop mylist
"a"
127.0.0.1:> rpop mylist
"b"

在实际使用中,我们为了及时消费,需要不停的 rpop 监听是否有消息进入,这样造成资源浪费。

②. 为了解决这一问题,redis 为我们提供了阻塞命令 brpop 和 blpop。

客户端 1 消费上次剩余的消息:

127.0.0.1:> brpop mylist
) "mylist"
) "c"

客户端 1 继续消费:

127.0.0.1:> brpop mylist 

我们发现客户端阻塞,正在等待中

客户端 2 往键 mylist 中添加消息:

127.0.0.1:> lpush mylist
(integer)

这时查看 客户端 1,消息已经拿到 且耗时 10 秒:

127.0.0.1:> brpop mylist
) "mylist"
) ""
(.45s)

2. 发布订阅

①. 客户端 1 发布消息

127.0.0.1:> publish channel: hi
(integer)

向命名为 channel:1 的频道发布一个 hi。

结果返回 0,表示接收到这条消息的订阅者数量。发出去的消息不会被持久化,也就是说后续的订阅者是不会收到这条消息的。

②. 客户端 2 订阅频道

127.0.0.1:> subscribe channel:
Reading messages... (press Ctrl-C to quit)
) "subscribe"
) "channel:1"
) (integer)

执行上面这条命令会进入订阅状态。

在订阅状态客户端可能会收到 3 种类型的回复。每种类型包含 3 个值。第 1 个值是消息的类型,根据消息类型的不同,第二个和第三个参数的含义可能不同。

消息类型分为:

  subscribe。表示订阅成功的反馈信息。第二个值是订阅成功的频道名称,第三个是当前客户端订阅的频道数量。

  message。表示接收到的消息,第二个值表示产生消息的频道名称,第三个值是消息的内容。

  unsubscribe。表示成功取消订阅某个频道。第二个值是对应的频道名称,第三个值是当前客户端订阅的频道数量,当此值为0时客户端会退出订阅状态,之后就可以执行其他非"发布/订阅"模式的命令了。

③. 客户端 1 再次发布消息

127.0.0.1:> publish channel: hi
(integer)

返回值表示有 1 个订阅者收到消息。

④. 客户端 2 已看到内容为 hi 的 message 类型的消息

127.0.0.1:> subscribe channel:
Reading messages... (press Ctrl-C to quit)
) "subscribe"
) "channel:1"
) (integer)
) "message"
) "channel:1"
) "hi"

频道可以不用具体的名字,而使用通配符命名:

  ? 表示 1 个占位符

  * 表示任意个占位符,包含 0 个

  ?*  表示最少 1 个占位符

当我们向命名为 channel* 的频道发送消息时。

订阅命名为 channel1 channel2 channel_a 这 3 个频道的订阅者都会收到消息。

3. 在 SpringBoot 中实现订阅

①. 声明配置 Bean,订阅 channel:1 频道

@Configuration
public class RedisListener { @Bean
RedisMessageListenerContainer container(RedisConnectionFactory redisConnectionFactory, MessageListenerAdapter listenerAdapter) {
RedisMessageListenerContainer container = new RedisMessageListenerContainer();
container.setConnectionFactory(redisConnectionFactory);
container.addMessageListener(listenerAdapter, new PatternTopic("channel:1"));
return container;
} @Bean
MessageListenerAdapter listenerAdapter(RedisReceiver redisReceiver) {
return new MessageListenerAdapter(redisReceiver, "receiveMessage");
} } @Service
class RedisReceiver {
public void receiveMessage(String message) { System.out.println("订阅者:" + message);
}
}

②. 使用 Junit 实现向频道 channel:1 发布消息

@Test
public void publish() {
redisTemplate.convertAndSend("channel:1", "Java客户端向你示好");
}

③. 执行单元测试后,控制台输出

订阅者:"Java客户端向你示好"

四、bitmap 位图

减少内存的方案

比如统计每日用户的登录数

1. API

getbit key offset # 获取指定 key 的指定位置上的值
setbit key offset value # 对指定 key 的指定位置上设置值,只能设置为 0 或 1
bitcount key [start end] # 获取位图指定范围内值为 1 的个数。
bitop op destKey key1 [key2] # 做多个 bitmap 的 and (交集)、or (并集)、not(非)、xor(异或) 操作并将结果保存到 destKey 中。
bitpos key tartgetBit [start end] # 获取指定范围内第一个等于 tartgetBit 的值的位置,找不到返回 -1

2. 演示

127.0.0.1:> set hello big
OK
127.0.0.1:> getbit hello
(integer)
127.0.0.1:> getbit hello
(integer)
127.0.0.1:> setbit hello
(integer)
127.0.0.1:> get hello
"cig"
127.0.0.1:> bitcount hello
(integer)
127.0.0.1:> bitcount hello
(integer)
127.0.0.1:> set world small
OK
127.0.0.1:> bitop and helloWorld hello world
(integer) 5
127.0.0.1:> bitcount helloWorld
(integer)
127.0.0.1:> bitpos hello
(integer)
127.0.0.1:> bitpos hello
(integer)

五、hyperloglog

极端的减少内存的方案 / 数据结构

可以用来做独立用户统计,缺陷是有错误率,并且只能查询去重后的总数而不是查看具体元素。

1. API

pfadd key element [element ...] # 添加元素
pfcount key # 计算去重后的总数
pfmerge destKey sourceKey # 合并多个 key 到 destKey

2. 演示

127.0.0.1:> pfadd :user:list "user1" "user2" "user3" "user4"
(integer)
127.0.0.1:> pfcount :user:list
(integer)
127.0.0.1:> pfadd :user:list "user1" "user2" "user3" "user5"
(integer)
127.0.0.1:> pfcount :user:list
(integer)

六、geo(地理信息定位)

存储经纬度,计算两地距离,范围计算等

Redis 学习-Redis 的其他功能的更多相关文章

  1. Redis学习——Redis持久化之AOF备份方式保存数据

    新技术的出现一定是在老技术的基础之上,并且完善了老技术的某一些不足的地方,新技术和老技术就如同JAVA中的继承关系.子类(新技术)比父类(老技术)更加的强大! 在前面介绍了Redis学习--Redis ...

  2. Redis学习---Redis操作之Python连接

    PyCharm下的Redis连接 连接方式: 1. 操作模式 redis-py提供两个类Redis和StrictRedis用于实现Redis的命令,StrictRedis用于实现大部分官方的命令,并使 ...

  3. Redis学习——Redis事务

    Redis和传统的关系型数据库一样,因为具有持久化的功能,所以也有事务的功能! 有关事务相关的概念和介绍,这里就不做介绍. 在学习Redis的事务之前,首先抛出一个面试的问题. 面试官:请问Redis ...

  4. Redis学习——Redis持久化之RDB备份方式保存数据

    从这一个介绍里面知道,redis比memcache作为缓存数据库强大的地方,一个是支持的数据类型比较多,另一个就是redis持久化功能. 下面就介绍Redis的持久化之RDB! 一:什么是redis的 ...

  5. redis学习——redis应用场景

    毫无疑问,Redis开创了一种新的数据存储思路,使用Redis,我们不用在面对功能单调的数据库时,把精力放在如何把大象放进冰箱这样的问题上,而是利用Redis灵活多变的数据结构和数据操作,为不同的大象 ...

  6. [转]Redis学习---Redis高可用技术解决方案总结

    [原文]https://www.toutiao.com/i6591646189714670093/ 本文主要针对Redis常见的几种使用方式及其优缺点展开分析. 一.常见使用方式 Redis的几种常见 ...

  7. Redis学习三(进阶功能).

    一.排序 redis 支持对 list,set 和 zset 元素的排序,排序的时间复杂度是 O(N+M*log(M)).(N 是集合大小,M 为返回元素的数量) sort key [BY patte ...

  8. Redis学习——redis.conf 配置文件介绍

    学以致用 学在用前 参看文章: redis.conf 配置详解 Redis配置文件详解(redis.conf)-云栖社区 在Redis的使用过程,除了知道对Redis五种数据类型的操作方法之外,最主要 ...

  9. Redis学习--Redis数据类型

    Redis的5种基本类型 1.String 2.Hash 3.List 4.Set 5.Sorted Set String常见用法 1.get key 返回value 2.set key value ...

随机推荐

  1. [转]centos sqlite3安装及简单命令

    安装: 方法一: wget http://www.sqlite.org/sqlite-autoconf-3070500.tar.gz tar xvzf sqlite-autoconf-3070500. ...

  2. filebeat获取nginx的access日志配置

    filebeat获取nginx的access日志配置 产生nginx日志的服务器即生产者服务器配置: 拿omp.chinasoft.com举例: .nginx.conf主配置文件添加日志格式 log_ ...

  3. python虛擬環境和工具

    1.命令 pip install virtualenvwrapper-win mkvirtualenv env_xadmin deactivate  退出 pip list pip install m ...

  4. BDD介绍

    TDD: TDD(Test-Drivern Development)测试驱动开发,是敏捷开发中的一项核心实践和技术,也是一种设计方法论.TDD的原理是在开发功能代码之前,先编写单元测试用例代码,测试代 ...

  5. Python3基础 tuple list转为tuple

             Python : 3.7.3          OS : Ubuntu 18.04.2 LTS         IDE : pycharm-community-2019.1.3    ...

  6. WebGL学习笔记(四):绘图

    图元 WebGL可以绘制非常复杂的3D模型,这些模型都是由下面3种基本几何图元构成的,下面我们来详细的看看. 三角形 WebGL中任何复杂的模型,都是由三角形组合而成的,可以说三角形是任意形状的最小构 ...

  7. nodejs 管道判断

    // 不优雅的判断管道判断 let d process.stdin.on('data', chunk => { d = String(chunk) }) setTimeout(() => ...

  8. 使用Fiddler工具发送post请求(带有json数据)以及get请求(Header方式传参)

    Fiddler工具是一个http协议调试代理工具,它可以帮助程序员测试或调试程序,辅助web开发. Fiddler工具可以发送向服务端发送特定的HTTP请求以及接受服务器回应的请求和数据,是web调试 ...

  9. WARNING:Your password has expired --linux 用户密码过期

    今天在ssh 提示  WARNING:Your password has expired 设置用户到期时间 chage -M 36000 用户名 chage -l 用户名 #查看用户信息

  10. GitLab数据备份与恢复

    创建备份 $ sudo gitlab-rake gitlab:backup:create 执行完备份命令后会在/var/opt/gitlab/backups目录下生成备份后的文件,如150080913 ...