一、实现原理

  一致性哈希算法(Consistent Hashing): http://www.zsythink.net/archives/1182

二、配置两个redis服务,端口号要不一致

三、代码

. 配置文件
redis1.ip = 127.0.0.1
redis1.port= redis2.ip = 127.0.0.1
redis2.port= #最大连接数
redis.max.total=
#最大空闲数
redis.max.idle=
#最小空闲数
redis.min.idle=
#效验使用可用连接
redis.test.borrow=true
#效验归还可用连接
redis.test.return=false
 package com.mmall.common;

 import com.mmall.util.PropertiesUtil;
import redis.clients.jedis.JedisPoolConfig;
import redis.clients.jedis.JedisShardInfo;
import redis.clients.jedis.ShardedJedis;
import redis.clients.jedis.ShardedJedisPool;
import redis.clients.util.Hashing;
import redis.clients.util.Sharded;
import java.util.ArrayList;
import java.util.List; /**
* redis分片连接池
*/
public class RedisShardedPool {
private static ShardedJedisPool pool ; //jedis连接池
private static Integer maxTotal = Integer.parseInt(PropertiesUtil.getProperty("redis.max.total","20")); //最大连接数
private static Integer maxIdle = Integer.parseInt(PropertiesUtil.getProperty("redis.max.idle","10")); //最大空闲状态
private static Integer minIdle =Integer.parseInt(PropertiesUtil.getProperty("redis.min.idle","2")); //最小空闲状态 private static Boolean testOnBorrow =Boolean.parseBoolean(PropertiesUtil.getProperty("redis.test.borrow","true")); //验证从连接池拿出的jedis实例,一定可用
private static Boolean testOnReturn =Boolean.parseBoolean(PropertiesUtil.getProperty("redis.test.return","true")); //验证还回连接池的jedis实例,一定可用 private static String redis1Ip =PropertiesUtil.getProperty("redis1.ip"); //最小空闲状态
private static Integer redis1Port =Integer.parseInt(PropertiesUtil.getProperty("redis1.port")); //最小空闲状态
private static String redis2Ip =PropertiesUtil.getProperty("redis2.ip"); //最小空闲状态
private static Integer redis2Port =Integer.parseInt(PropertiesUtil.getProperty("redis2.port")); //最小空闲状态 private static void initPool(){
JedisPoolConfig config = new JedisPoolConfig();
config.setMaxTotal(maxTotal);
config.setMaxIdle(maxIdle);
config.setMinIdle(minIdle); config.setTestOnBorrow(testOnBorrow);
config.setTestOnReturn(testOnReturn); config.setBlockWhenExhausted(true); //连接耗尽时是否阻塞,false抛出异常;true阻塞到超时。默认true JedisShardInfo info1 = new JedisShardInfo(redis1Ip,redis1Port,1000*2);
JedisShardInfo info2 = new JedisShardInfo(redis2Ip,redis2Port,1000*2);
List<JedisShardInfo> jedisShardInfoList = new ArrayList<JedisShardInfo>(2);
jedisShardInfoList.add(info1);
jedisShardInfoList.add(info2); pool = new ShardedJedisPool(config,jedisShardInfoList, Hashing.MURMUR_HASH, Sharded.DEFAULT_KEY_TAG_PATTERN);
} static{
initPool();
} public static ShardedJedis getJedis(){
return pool.getResource();
} /**
* redis不正常不可用,将其废弃,最新版本直接将此连接销毁jedis.close();
* @param jedis
*/
public static void returnBrokenResource(ShardedJedis jedis){
pool.returnBrokenResource(jedis);
} public static void returnResource(ShardedJedis jedis){
pool.returnResource(jedis);
} public static void main(String[] args) {
ShardedJedis shardedJedis = pool.getResource();
for (int i = 0; i<10; i++){
shardedJedis.set("key"+i,"value"+i);
}
returnResource(shardedJedis); //使用后的连接放回连接池中
// pool.destroy(); // 销毁连接池的所有连接
System.out.println("program is end"); }
}

运行main方法,查询redis生成的数据:

封装常用redisAPI

import com.mmall.common.RedisShardedPool;
import lombok.extern.slf4j.Slf4j;
import redis.clients.jedis.Jedis;
import redis.clients.jedis.ShardedJedis; /**
* 封装分片redis
*/
@Slf4j
public class RedisShardedPoolUtil { /**
* 设置对应key的有效期
* @param key
* @param exTime 有效期,单位秒
* @return
*/
public static Long expire(String key, int exTime){
ShardedJedis shardedJedis = null;
Long result = null;
try{
shardedJedis = RedisShardedPool.getJedis();
result = shardedJedis.expire(key,exTime);
}catch (Exception e){
log.error("set key:{} exTime:{} value:{} error",key,exTime,e);
RedisShardedPool.returnBrokenResource(shardedJedis);
return result;
}
RedisShardedPool.returnResource(shardedJedis);
return result;
} /**
* string 添加,存在有效期exTime
* @param key 键
* @param value 值
* @param exTime 有效期,单位秒
* @return
*/
public static String setEx(String key, String value, int exTime){
ShardedJedis shardedJedis = null;
String result = null;
try{
shardedJedis = RedisShardedPool.getJedis();
result = shardedJedis.setex(key,exTime,value);
}catch (Exception e){
log.error("set key:{} exTime:{} value:{} error",key,exTime,value,e);
RedisShardedPool.returnBrokenResource(shardedJedis);
return result;
}
RedisShardedPool.returnResource(shardedJedis);
return result;
} /**
* string 添加
* @param key
* @param value
* @return
*/
public static String set(String key, String value){
ShardedJedis shardedJedis = null;
String result = null;
try{
shardedJedis = RedisShardedPool.getJedis();
result = shardedJedis.set(key,value);
}catch (Exception e){
log.error("set key:{} value:{} error",key,value,e);
RedisShardedPool.returnBrokenResource(shardedJedis);
return result;
}
RedisShardedPool.returnResource(shardedJedis);
return result;
} /**
* string 获取
* @param key
* @return
*/
public static String get(String key){
ShardedJedis shardedJedis = null;
String result = null;
try{
shardedJedis = RedisShardedPool.getJedis();
result = shardedJedis.get(key);
}catch (Exception e){
log.error("get key:{} error",key,e);
RedisShardedPool.returnBrokenResource(shardedJedis);
return result;
}
RedisShardedPool.returnResource(shardedJedis);
return result;
}
public static String getSet(String key, String value){
ShardedJedis shardedJedis = null;
String result = null;
try{
shardedJedis = RedisShardedPool.getJedis();
result = shardedJedis.getSet(key,value);
}catch (Exception e){
log.error("set key:{} value:{} error",key,value,e);
RedisShardedPool.returnBrokenResource(shardedJedis);
return result;
}
RedisShardedPool.returnResource(shardedJedis);
return result;
} /**
* stirng 删除
* @param key
* @return
*/
public static Long del(String key){
ShardedJedis shardedJedis = null;
Long result = null;
try{
shardedJedis = RedisShardedPool.getJedis();
result = shardedJedis.del(key);
}catch (Exception e){
log.error("get key:{} error",key,e);
RedisShardedPool.returnBrokenResource(shardedJedis);
return result;
}
RedisShardedPool.returnResource(shardedJedis);
return result;
} public static Long setnx(String key, String value){
ShardedJedis shardedJedis = null;
Long result = null;
try{
shardedJedis = RedisShardedPool.getJedis();
result = shardedJedis.setnx(key,value);
}catch (Exception e){
log.error("set key:{} value:{} error",key,value,e);
RedisShardedPool.returnBrokenResource(shardedJedis);
return result;
}
RedisShardedPool.returnResource(shardedJedis);
return result;
}
}

四、ShardedJedis相关类介绍

  (1)、ShardedJedisPool

    ShardedJedis是基于一致性哈希算法实现的分布式Redis集群客户端;ShardedJedis的设计分为以下几块:
    对象池设计:Pool,ShardedJedisPool,ShardedJedisFactory
    面向用户的操作封装:BinaryShardedJedis,BinaryShardedJedis
    一致性哈希实现:Sharded

    Sharded一致性哈希实现
    shared一致性哈希采用以下方案:
    Redis服务器节点划分:将每台服务器节点采用hash算法划分为160个虚拟节点(可以配置划分权重)
    将划分虚拟节点采用TreeMap存储
    对每个Redis服务器的物理连接采用LinkedHashMap存储
     对Key or KeyTag 采用同样的hash算法,然后从TreeMap获取大于等于键hash值得节点,取最邻近节点存储;当key的hash值大于虚拟节点hash值得最大值时,存入第一个虚拟节点。

  (2)、JedisShardInfo

      配置每台redis服务器的连接

     JedisShardInfo info1 = new JedisShardInfo(redis1Ip,redis1Port,1000*2);

redis集群(多机)分布的更多相关文章

  1. Redis集群分布

    Redis系列 作者Mr.Chen,转载请注明博客出处:http://www.cnblogs.com/cjh-notes/ Redis集群存储 先看下架构图,下面说明其存储原理:首先redis每个节点 ...

  2. 在虚拟机上安装redis集群,redis使用版本为4.0.5,本机通过命令客户端可以连接访问,外部主机一直访问不了

    在虚拟机上安装了redis 4 ,启动后本机客户端可以连接访问,但是外部主机一直访问不了,在使用java代码连接redis集群时报:no reachable node in cluster,原因:在r ...

  3. redis集群节点宕机

    redis集群是有很多个redis一起工作,那么就需要这个集群不是那么容易挂掉,所以呢,理论上就应该给集群中的每个节点至少一个备用的redis服务.这个备用的redis称为从节点(slave). 1. ...

  4. Redis集群环境之linux搭建多机版---已完结,跟着一步一步来你就可以集群成功

    上一篇踩着各种坑写了Redis集群环境之linux搭建单机版,这一篇准备就多机版集群进行搭建,主要目的一来是在上一篇的基础上进行精华提粹总结,二来是把单机版与多机版的区别进行记录. 首先软硬件环境: ...

  5. centos6.5下redis集群配置(多机多节点)

    可参考官网文档:redis集群配置 需要注意的是,集群中的每个节点都会涉及到两个端口,一个是用于处理客户端操作的(如下介绍到的6379/6380),另一个是10000+{监听端口},用于集群各个节点间 ...

  6. Redis 集群的合纵与连横

    之前一篇写了关于 Redis 的性能,这篇就写写我认为比性能更重要的扩展性方面的主题. 如果再给我一次回到好几年前的机会,对于使用 Redis 我一开始就要好好考虑将来的扩展问题.就像我们做数据库分库 ...

  7. (转)基于Redis Sentinel的Redis集群(主从&Sharding)高可用方案

    转载自:http://warm-breeze.iteye.com/blog/2020413 本文主要介绍一种通过Jedis&Sentinel实现Redis集群高可用方案,该方案需要使用Jedi ...

  8. Redis集群

    一.Redis集群原理 集群技术是构建高性能网站架构的重要手段,试想在网站承受高并发访问压力的同时,还需要从海量数据中查询出满足条件的数据,并快速响应,我们必然想到的是将数据进行切片,把数据根据某种规 ...

  9. Redis集群方案应该怎么做

    方案1:Redis官方集群方案 Redis Cluster Redis Cluster是一种服务器sharding分片技术.Redis Cluster集群如何搭建请参考我的另一篇博文:http://w ...

随机推荐

  1. Collection接口详解

    Collection 介绍 https://blog.csdn.net/jyg0723/article/details/80498840 Stream API介绍  https://www.jians ...

  2. Drainage Ditches (HDU - 1532)(最大流)

    HDU - 1532 题意:有m个点,n条管道,问从1到m最大能够同时通过的水量是多少? 题解:最大流模板题. #include <iostream> #include <algor ...

  3. redis集群搭建问题

    redis集群创建执行 ./redis-trib.rb create --replicas 1 XXXX:PORT1 XXXX:PORT2 .... 的时候 一直等待 Waiting for the ...

  4. 重读APUE(9)-SIG_ERR、SIG_DFL、SIG_IGN定义无参数

    下面这几个函数定义,每次看到都会纠结一阵子,奇怪的是为什么没有参数? #define SIG_ERR (void (*)())-1 #define SIG_DFL (void (*)())0 #def ...

  5. How to Publish a NuGet Package

    How to Publish a NuGet Package Command line To push packages to nuget.org you must use nuget.exe v4. ...

  6. BOM相关方法及属性

    browser objec tmodel浏览器对象模型 BOM里面的方法大多在window对象底下,window代表窗口,也就是说,在BOM里面大多调用window下面的东西. 1.open方法是wi ...

  7. 《你不知道的JavaScript(上)》笔记——词法作用域

    词法作用域是一套关于引擎如何寻找变量以及会在何处找到变量的规则. 词法作用域最重要的特征是它的定义过程发生在代码的书写阶段(假设你没有使用eval() 或 with) 欺骗词法:指修改词法作用域, 欺 ...

  8. WINFORM控件tabcontrol,隐藏,调用等等

    1先说显示项的控制, 第一个是selectedIndex属性这个实用性不是太强,但是如果不涉及到隐藏,删除,增加tabpage的话,也可以用. 第二个是selectedTab=tabPage1,这个属 ...

  9. Facebook币Libra学习-1.核心概念

    Libra区块链是一个基于Libra协议的加密认证的分布式数据库.本文将简略介绍Libra协议的核心概念.其详细说明请参阅Libra技术白皮书. Libra区块链由分布式的Validator节点网络维 ...

  10. Tomca的启动与关闭

    点击startup.bat启动,遇到一闪而过的问题,可能尚未配置JAVA_HOME 8080端口被占用导致启动失败 关闭Tomcat的三种方式 * 点击x (不推荐) * 双击shutdown.bat ...