Jedis客户端即redis中的pipeline批量操作
关注公众号:CoderBuff,回复“redis”获取《Redis5.x入门教程》完整版PDF。
- 《Redis5.x入门教程》目录
- 第一章 · 准备工作
- 第二章 · 数据类型
- 第三章 · 命令
- 第四章 · 配置
- 第五章 · Java客户端(上)
- 第六章 · 事务
- 第七章 · 分布式锁
- 第八章 · Java客户端(下)
第五章 · Java客户端(上)
有关本章的源码:https://github.com/yu-linfeng/redis5.x_tutorial/tree/master/code/jedis
前面的章节介绍了redis的安装、还有命令配置等内容,我们在实际使用时大部分情况都是利用现成的Java客户端对redis进行操作。当然命令并不是没用,它极有可能在你排查问题时排上用场,因为你有可能会直接连入redis服务端通过命令行来排查是否是redis缓存的问题。
redis的Java客户端最常用的是jedis开源库,本章我们也将围绕jedis的对redis进行一些简单的操作,jedis的GitHub地址:https://github.com/xetorthio/jedis。
package com.coderbuff.jedis.simple;
import redis.clients.jedis.Jedis;
/**
* @author okevin
* @date 2020/2/12 23:08
*/
public class Demo {
public static void main(String[] args) {
Jedis jedis = new Jedis("localhost");
jedis.set("redis-client", "jedis");
System.out.println(jedis.get("redis-client"));
jedis.close();
}
}
这是一个简单的jedis连接示例,使用MySQL的经验告诉我们:类似有socket连接的,我们最好是通过“池化”技术,一是更好的管理我们的连接;二是能更好的利用连接资源。所以当我们在使用jedis时,最好是使用jedis提供的池化技术。
package com.codrbuff.jedis.client;
import redis.clients.jedis.Jedis;
import redis.clients.jedis.JedisPool;
import redis.clients.jedis.JedisPoolConfig;
/**
* redis客户端连接
* @author okevin
* @date 2020/2/12 23:17
*/
public class RedisClient {
/**
* redis服务器地址
*/
private static final String HOST = "localhost";
/**
* jedis连接池
*/
private static JedisPool jedisPool = new JedisPool(new JedisPoolConfig(), HOST);
private RedisClient() {
}
/**
* 从jedispool中获取一个jedis连接
* @return jedis连接
*/
public static Jedis getJedis() {
return jedisPool.getResource();
}
}
package com.coderbuff.jedis.util;
import com.codrbuff.jedis.client.RedisClient;
import redis.clients.jedis.Jedis;
/**
* redis工具类
* @author okevin
* @date 2020/2/12 23:13
*/
public class RedisUtil {
//###########字符串(string)数据类型相关操作############
/**
* 字符串写入
* @param key key
* @param value 值
* @return 写入的值
*/
public static String set(String key, String value) {
try (Jedis jedis = RedisClient.getJedis()){
jedis.set(key, value);
return value;
}
}
public static String get(String key) {
try (Jedis jedis = RedisClient.getJedis()) {
return jedis.get(key);
}
}
}
当然我不准备在这里把所有的命令都展示出来,关于SDK的使用大可查看官方文档。
redis中有一个重要的功能——pipeline(管道),我们在操作大量数据时,redis的吞吐量性能可能较低,此时我们可以通过pipeline进行批量操作。这个功能在redis的命令中并没有,但redis是支持的。所以本章将重点介绍pipeline的使用,这在实际应用中非常常用。
pipeline(管道)
pipeline提供了命令的批量提交,当我们有批量查询或者写入操作时,单个命令的“往返时间”是1ms,那么10个命令就会消耗10ms,如果我们使用pipeline批量操作后可以一次性提交10个命令,redis的响应时间将会大大减小。吞吐量也自然提高。
实际上,之所以采用pipeline批量提交主要是为了控制网络开销,10个命令就会有10次网络开销,网络开销对于处于异地机房的影响尤为明显。所以在进行批量操作时,尽量使用pipeline管道操作。下面的例子是1万次字符串类型的写入,反映了非pipeline和pipeline的性能对比。
package com.coderbff.jedis.test;
import com.coderbuff.jedis.util.RedisUtil;
import com.codrbuff.jedis.client.RedisClient;
import org.junit.Test;
import redis.clients.jedis.Pipeline;
/**
* @author okevin
* @date 2020/2/12 23:32
*/
public class JedisTests {
@Test
public void testPipeline() {
long setStart = System.currentTimeMillis();
for (int i = 0; i < 10000; i++) {
RedisUtil.set("key_" + i, String.valueOf(i));
}
long setEnd = System.currentTimeMillis();
System.out.println("非pipeline操作10000次字符串数据类型set写入,耗时:" + (setEnd - setStart) + "毫秒");
long pipelineStart = System.currentTimeMillis();
Pipeline pipeline = RedisClient.getJedis().pipelined();
for (int i = 0; i < 10000; i++) {
pipeline.set("key_" + i, String.valueOf(i));
}
pipeline.sync();
long pipelineEnd = System.currentTimeMillis();
System.out.println("pipeline操作10000次字符串数据类型set写入,耗时:" + (pipelineEnd - pipelineStart) + "毫秒");
}
}
控制台输出结果:
非pipeline操作10000次字符串数据类型set写入,耗时:1843毫秒
pipeline操作10000次字符串数据类型set写入,耗时:205毫秒
可以看到,通过pipeline管道批量操作,吞吐量性能大大提到。
重要
使用pipeline有几个值得注意的地方:
- 它相比较于redis原生的字符串数据类型的批量操作命令,pipeline是非原子性的,
mset
是原子性的。mset
批量操作要么都成功要么都失败,而pipeline则不能保证。 mset
只是set
一个命令的批量操作,而pipeline则可以批量发送多个命令,这里就存在事务的问题。
针对问题一,我们在进行批量操作时应尽可能的把批量操作拆分成小粒度的pipeline。
针对问题二,要保证多个命令的事务,就需要使用redis提供的事务相关的命令,但redis中的事务是“假事务”,因为它仍然不能保证原子性。在下一章中,会详细介绍redis原生的简单事务(不保证原子性),以及如何在redis中保证事务的原子性。
关注公众号:CoderBuff,回复“redis”获取《Redis5.x入门教程》完整版PDF。
Jedis客户端即redis中的pipeline批量操作的更多相关文章
- .NET客户端实现Redis中的管道(PipeLine)与事物(Transactions)
序言 Redis中的管道(PipeLine)特性:简述一下就是,Redis如何从客户端一次发送多个命令,服务端到客户端如何一次性响应多个命令. Redis使用的是客户端-服务器模型和请求/响应协议的T ...
- Jedis客户端操作redis缓存命令详解
1.对value操作的命令 exists(key):确认一个key是否存在 del(key):删除一个key type(key):返回值的类型 keys(pattern):返回满足给定pattern的 ...
- Jedis API操作redis数据库
1.配置文件 classpath路径下,新建redis.properties配置文件 配置文件内容 # Redis settings redis.host=127.0.0.1 redis.port=6 ...
- springboot中Redis的Lettuce客户端和jedis客户端
1.引入客户端依赖 <!--jedis客户端依赖--> <dependency> <groupId>redis.clients</groupId> &l ...
- Redis(四)Jedis客户端
一.客户端通信协议 二.Java客户端Jedis 1.获取Jedis Jedis属于Java的第三方开发包,在Java中获取第三方开发包通常有两种方式: 直接下载目标版本的Jedis-${versio ...
- Redis集群的使用测试(Jedis客户端的使用)
Redis集群的使用测试(Jedis客户端的使用)1.Jedis客户端建议升级到最新版(当前为2.7.3),这样对3.0.x集群有比较好的支持.https://github.com/xetorthio ...
- Redis服务器搭建/配置/及Jedis客户端的使用方法
摘要 Redis服务器搭建.常用参数含意说明.主从配置.以及使用Jedis客户端来操作Redis Redis服务器搭建 安装 在命令行执行下面的命令: $ wget http://download.r ...
- 在Redis集群中使用pipeline批量插入
在Redis集群中使用pipeline批量插入 由于项目中需要使用批量插入功能, 所以在网上查找到了Redis 批量插入可以使用pipeline来高效的插入, 示例代码如下: Pipeline p = ...
- jedis客户端,取redis服务的值
package com.common.util; import java.io.ByteArrayInputStream; import java.io.ByteArrayOutputStream; ...
随机推荐
- .net core 2.2 中IHttpClientFactory的使用
在.net core中使用HttpClient请求api,有很多资源的问题,比如使用using的时候,虽然可以释放资源,但是套接字(socket)也不会立即释放,所以.net core2.1中,新增了 ...
- python小功能记录
本博客会不断完善,记录python小功能. 1. 合并两个字典 # in Python 3.5+ >>> x = {'a': 1, 'b': 2} >>> y = ...
- js多图预览及上传功能
<%-- Created by IntelliJ IDEA. User: Old Zhang Date: 2018/12/27 Time: 11:17 To change this templa ...
- 阿里巴巴Jetcache springboot使用教程
原文地址:https://www.jianshu.com/p/03b289439de2 springboot中使用说明 jetcache原理参见:https://www.jianshu.com/p/8 ...
- python条件与循环-条件
1.条件和循环 主要讨论:if.while.for以及相关的搭配else.elif.break.continue和pass语句. 1.1 if语句 if语句由三部分组成:关键字本身.用于判断结果真假的 ...
- 月经贴 】 Csharp in depth
让你 真正 喜欢 上 C# 编译器 准备 为你 上演 的 奇迹. C# 3 中 相对 乏味 的 一些 特性 开始. 自动 实现 的 属性 和 简化 的 初始化, 有一个 私 有的 无 参 构造 函 ...
- 20200104模拟赛 问题A 图样
题目 分析: 老规矩,遇到期望要准备好随时投降... 大致想到了按位处理,然后分别下去搜索,再用组合数加加减减一下... 但是两个连通块之间连边的期望怎么算呢? 很好,投降... 下来看题解... 果 ...
- Maven的学习之路1
对于下列这段Maven的命令行有不懂之处,在zgmzyr的博客上得到了解释.非常感谢这位博友,写在自己的随笔上以便查看和修改. 1. 创建项目 $ mvn archetype:generate -Dg ...
- 如何从Serilog请求日志记录中排除健康检查终结点
这是在ASP.NET Core 3.X中使用Serilog.AspNetCore系列文章的第四篇文章:. 第1部分-使用Serilog RequestLogging减少日志详细程度 第2部分-使用Se ...
- swift开发度假计划app
用swift开发一个完整的度假地app,设计到布局.数据绑定.数据编辑.页面导航等:适合初学者: github:(git@github.com:Frankltf/ios-swift-app.git)