Jedis客户端即redis中的pipeline批量操作
关注公众号:CoderBuff,回复“redis”获取《Redis5.x入门教程》完整版PDF。
- 《Redis5.x入门教程》目录
- 第一章 · 准备工作
- 第二章 · 数据类型
- 第三章 · 命令
- 第四章 · 配置
- 第五章 · Java客户端(上)
- 第六章 · 事务
- 第七章 · 分布式锁
- 第八章 · Java客户端(下)
第五章 · Java客户端(上)
有关本章的源码:https://github.com/yu-linfeng/redis5.x_tutorial/tree/master/code/jedis
前面的章节介绍了redis的安装、还有命令配置等内容,我们在实际使用时大部分情况都是利用现成的Java客户端对redis进行操作。当然命令并不是没用,它极有可能在你排查问题时排上用场,因为你有可能会直接连入redis服务端通过命令行来排查是否是redis缓存的问题。
redis的Java客户端最常用的是jedis开源库,本章我们也将围绕jedis的对redis进行一些简单的操作,jedis的GitHub地址:https://github.com/xetorthio/jedis。
package com.coderbuff.jedis.simple;
import redis.clients.jedis.Jedis;
/**
* @author okevin
* @date 2020/2/12 23:08
*/
public class Demo {
public static void main(String[] args) {
Jedis jedis = new Jedis("localhost");
jedis.set("redis-client", "jedis");
System.out.println(jedis.get("redis-client"));
jedis.close();
}
}
这是一个简单的jedis连接示例,使用MySQL的经验告诉我们:类似有socket连接的,我们最好是通过“池化”技术,一是更好的管理我们的连接;二是能更好的利用连接资源。所以当我们在使用jedis时,最好是使用jedis提供的池化技术。
package com.codrbuff.jedis.client;
import redis.clients.jedis.Jedis;
import redis.clients.jedis.JedisPool;
import redis.clients.jedis.JedisPoolConfig;
/**
* redis客户端连接
* @author okevin
* @date 2020/2/12 23:17
*/
public class RedisClient {
/**
* redis服务器地址
*/
private static final String HOST = "localhost";
/**
* jedis连接池
*/
private static JedisPool jedisPool = new JedisPool(new JedisPoolConfig(), HOST);
private RedisClient() {
}
/**
* 从jedispool中获取一个jedis连接
* @return jedis连接
*/
public static Jedis getJedis() {
return jedisPool.getResource();
}
}
package com.coderbuff.jedis.util;
import com.codrbuff.jedis.client.RedisClient;
import redis.clients.jedis.Jedis;
/**
* redis工具类
* @author okevin
* @date 2020/2/12 23:13
*/
public class RedisUtil {
//###########字符串(string)数据类型相关操作############
/**
* 字符串写入
* @param key key
* @param value 值
* @return 写入的值
*/
public static String set(String key, String value) {
try (Jedis jedis = RedisClient.getJedis()){
jedis.set(key, value);
return value;
}
}
public static String get(String key) {
try (Jedis jedis = RedisClient.getJedis()) {
return jedis.get(key);
}
}
}
当然我不准备在这里把所有的命令都展示出来,关于SDK的使用大可查看官方文档。
redis中有一个重要的功能——pipeline(管道),我们在操作大量数据时,redis的吞吐量性能可能较低,此时我们可以通过pipeline进行批量操作。这个功能在redis的命令中并没有,但redis是支持的。所以本章将重点介绍pipeline的使用,这在实际应用中非常常用。
pipeline(管道)
pipeline提供了命令的批量提交,当我们有批量查询或者写入操作时,单个命令的“往返时间”是1ms,那么10个命令就会消耗10ms,如果我们使用pipeline批量操作后可以一次性提交10个命令,redis的响应时间将会大大减小。吞吐量也自然提高。
实际上,之所以采用pipeline批量提交主要是为了控制网络开销,10个命令就会有10次网络开销,网络开销对于处于异地机房的影响尤为明显。所以在进行批量操作时,尽量使用pipeline管道操作。下面的例子是1万次字符串类型的写入,反映了非pipeline和pipeline的性能对比。
package com.coderbff.jedis.test;
import com.coderbuff.jedis.util.RedisUtil;
import com.codrbuff.jedis.client.RedisClient;
import org.junit.Test;
import redis.clients.jedis.Pipeline;
/**
* @author okevin
* @date 2020/2/12 23:32
*/
public class JedisTests {
@Test
public void testPipeline() {
long setStart = System.currentTimeMillis();
for (int i = 0; i < 10000; i++) {
RedisUtil.set("key_" + i, String.valueOf(i));
}
long setEnd = System.currentTimeMillis();
System.out.println("非pipeline操作10000次字符串数据类型set写入,耗时:" + (setEnd - setStart) + "毫秒");
long pipelineStart = System.currentTimeMillis();
Pipeline pipeline = RedisClient.getJedis().pipelined();
for (int i = 0; i < 10000; i++) {
pipeline.set("key_" + i, String.valueOf(i));
}
pipeline.sync();
long pipelineEnd = System.currentTimeMillis();
System.out.println("pipeline操作10000次字符串数据类型set写入,耗时:" + (pipelineEnd - pipelineStart) + "毫秒");
}
}
控制台输出结果:
非pipeline操作10000次字符串数据类型set写入,耗时:1843毫秒
pipeline操作10000次字符串数据类型set写入,耗时:205毫秒
可以看到,通过pipeline管道批量操作,吞吐量性能大大提到。
重要
使用pipeline有几个值得注意的地方:
- 它相比较于redis原生的字符串数据类型的批量操作命令,pipeline是非原子性的,
mset
是原子性的。mset
批量操作要么都成功要么都失败,而pipeline则不能保证。 mset
只是set
一个命令的批量操作,而pipeline则可以批量发送多个命令,这里就存在事务的问题。
针对问题一,我们在进行批量操作时应尽可能的把批量操作拆分成小粒度的pipeline。
针对问题二,要保证多个命令的事务,就需要使用redis提供的事务相关的命令,但redis中的事务是“假事务”,因为它仍然不能保证原子性。在下一章中,会详细介绍redis原生的简单事务(不保证原子性),以及如何在redis中保证事务的原子性。
关注公众号:CoderBuff,回复“redis”获取《Redis5.x入门教程》完整版PDF。

Jedis客户端即redis中的pipeline批量操作的更多相关文章
- .NET客户端实现Redis中的管道(PipeLine)与事物(Transactions)
序言 Redis中的管道(PipeLine)特性:简述一下就是,Redis如何从客户端一次发送多个命令,服务端到客户端如何一次性响应多个命令. Redis使用的是客户端-服务器模型和请求/响应协议的T ...
- Jedis客户端操作redis缓存命令详解
1.对value操作的命令 exists(key):确认一个key是否存在 del(key):删除一个key type(key):返回值的类型 keys(pattern):返回满足给定pattern的 ...
- Jedis API操作redis数据库
1.配置文件 classpath路径下,新建redis.properties配置文件 配置文件内容 # Redis settings redis.host=127.0.0.1 redis.port=6 ...
- springboot中Redis的Lettuce客户端和jedis客户端
1.引入客户端依赖 <!--jedis客户端依赖--> <dependency> <groupId>redis.clients</groupId> &l ...
- Redis(四)Jedis客户端
一.客户端通信协议 二.Java客户端Jedis 1.获取Jedis Jedis属于Java的第三方开发包,在Java中获取第三方开发包通常有两种方式: 直接下载目标版本的Jedis-${versio ...
- Redis集群的使用测试(Jedis客户端的使用)
Redis集群的使用测试(Jedis客户端的使用)1.Jedis客户端建议升级到最新版(当前为2.7.3),这样对3.0.x集群有比较好的支持.https://github.com/xetorthio ...
- Redis服务器搭建/配置/及Jedis客户端的使用方法
摘要 Redis服务器搭建.常用参数含意说明.主从配置.以及使用Jedis客户端来操作Redis Redis服务器搭建 安装 在命令行执行下面的命令: $ wget http://download.r ...
- 在Redis集群中使用pipeline批量插入
在Redis集群中使用pipeline批量插入 由于项目中需要使用批量插入功能, 所以在网上查找到了Redis 批量插入可以使用pipeline来高效的插入, 示例代码如下: Pipeline p = ...
- jedis客户端,取redis服务的值
package com.common.util; import java.io.ByteArrayInputStream; import java.io.ByteArrayOutputStream; ...
随机推荐
- kmp-最小子串回文次数
poj 2406 Given two strings a and b we define a*b to be their concatenation. For example, if a = &quo ...
- typescript学习笔记(一)---基础变量类型
作为一个前端开发者,学习新技术跟紧大趋势是必不可少的.随着2019年TS的大火,我打算利用一个月的时间学习这门语言.接下来的几篇文章是我学习TS的学习笔记,其中也会掺杂一些学习心得.话不多说,先从基础 ...
- MacOSX 安装 TensorFlow
TensorFlow是一个端到端开源机器学习平台.它拥有一个包含各种工具.库和社区资源的全面灵活生态系统,可以让研究人员推动机器学习领域的先进技术的. 准备 安装 Anaconda TensorFlo ...
- Docker在树莓派的安装与使用(Ubuntu Arm Server v19.10)
最近由于冠状病毒疫情的原因,只能够和小朋友家里蹲.这几天把尘封已久的那个树莓派拿出来继续捣鼓.希望能够做一个异构的分布式系统框架,于是想把Docker也安装到树莓派上,以便后期做进一步的开发和实验. ...
- 简单实现Android手机“全局可调试”(ro.debuggable = 1)的方法【锤子坚果3】
在Android真机上调试程序有一个前提,就是这个apk包必须有 debuggable=true 的属性才行.而除了自己开发的apk能够控制打包属性之外,其他的程序发行之后显然不会设这个值为 true ...
- 一次完整的OCR实践记录
一.任务介绍 这次的任务是对两百余张图片里面特定的编号进行识别,涉及保密的原因,这里就不能粘贴出具体的图片了,下面粘贴出一张类似需要识别的图片. 假如说我的数据源如上图所示,那么我需要做的工作就是将上 ...
- 2、初始ES6及Vue
今日内容 es6的语法 let 特点: 1.局部作用域 2.不会存在变量提升 3.变量不能重复声明 const 特点: 1.局部作用域 2.不会存在变量提升 3.不能重复声明,只声明常量 不可变的量 ...
- Wireshark入门与进阶系列五之常见捕获过滤器
0x00 前言 我们都知道,wireshark可以实现本地抓包,同时Wireshark也支持remote packet capture protocol(rpcapd)协议远程抓包,只要在远程主机上安 ...
- linux容器技术之chroot
linux容器技术之chroot linux chroot 机制的由来 root 用户启动一个daemon,必须用root 用户来启动,比如一个web 服务器(nginx/apapce 80端口)是在 ...
- PKU 1185-炮兵阵地(状压DP)
炮兵阵地 题目链接 Time Limit: 2000MS Memory Limit: 65536K Total Submissions: 34827 Accepted: 13353 Descripti ...