redis集群(单机6节点实现)
Redis集群搭建与简单使用
1.介绍安装环境与版本:
1)Redis使用的是Redis-3.2.8版本。
2)用一台虚拟机模拟6个节点,三个master节点,三个slave节点。虚拟机使用CentOS6.5系统(192.168.0.132)。
2.原理介绍:
Redis cluster在设计的时候,就考虑到了去中心化,去中间件,也就是说,集群中的每个节点都是平等的关系,都是对等的,每个节点都保存各自的数据和整个集群的状态。每个节点都和其他所有节点连接,而且这些连接保持活跃,这样就保证了我们只需要连接集群中的任意一个节点,就可以获取到其他节点的数据。
Redis 集群没有并使用传统的一致性哈希来分配数据,而是采用另外一种叫做哈希槽 (hash slot)
的方式来分配的。redis cluster 默认分配了 16384 个slot,当我们set一个key 时,会用CRC16
算法来取模得到所属的slot
,然后将这个key 分到哈希槽区间的节点上,具体算法就是:CRC16(key) % 16384。所以我们在测试的时候看到set 和 get 的时候,直接跳转到了7001端口的节点。
Redis 集群会把数据存在一个 master 节点,然后在这个 master 和其对应的salve 之间进行数据同步。当读取数据时,也根据一致性哈希算法到对应的 master 节点获取数据。只有当一个master 挂掉之后,才会启动一个对应的 salve 节点,充当 master 。
需要注意的是:必须要3个或以上
的主节点,否则在创建集群时会失败,并且当存活的主节点数小于总节点数的一半时,整个集群就无法提供服务了。
3.安装过程:
1)解压并编译安装
#mkdir -p /data/redis/cluster;cd /data/redis //创建环境目录
#tar -zxvf redis-3.2.8.tar.gz //解压安装包
#cd redis-3.2.8/ //进入到Redis源码包
#make && make install //编译并安装
2)将 redis-trib.rb 复制到 /usr/local/bin 目录下,因为 redis-trib.rb 是基于Ruby的,所以还需要安装Ruby。
#cd src;cp redis-trib.rb /usr/local/bin/
#yum -y
install
ruby ruby-devel rubygems rpm-build //安装Ruby和其依赖
#gem
install
redis //ruby安装redis依赖
3)创建 Redis 节点
#cd /data/redis/cluster && mkdir {7001..7006}
#cp /data/redis/redis-3.2.8/redis.conf 7001/
#cp /data/redis/redis-3.2.8/redis.conf 7002/
#cp /data/redis/redis-3.2.8/redis.conf 7003/
#cp /data/redis/redis-3.2.8/redis.conf 7004/
#cp /data/redis/redis-3.2.8/redis.conf 7005/
#cp /data/redis/redis-3.2.8/redis.conf 7006/
分别修改六个配置文件:
#vi redis.conf
port 7001 //端口7001,7002,7003,7004,7005,7006
bind 192.168.0.132 //默认ip为127.0.0.1 需要改为其他节点机器可访问的ip 否则创建集群时无法访问对应的端口,无法创建集群
daemonize yes //redis后台运行
timeout 10000 //超时时间
pidfile /var/run/redis_7001.pid //pidfile文件对应7000,7001,7002
cluster-enabled yes //开启集群 把注释#去掉
cluster-config-file nodes_7000.conf //集群的配置 配置文件首次启动自动生成 7000,7001,7002
cluster-node-timeout 15000 //请求超时 默认15秒,可自行设置
appendonly yes //aof日志开启 有需要就开启,它会每次写操作都记录一条日志
appendfsync everysec //aof刷新方式
#save 900 1
#save 300 10
#save 60 10000
rdbcompression yes
dbfilename dump.rdb
loglevel verbose
databases 16
slave-serve-stale-data yes
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
slowlog-log-slower-than 10000
slowlog-max-len 1024
#hash-max-zipmap-entries 512
#hash-max-zipmap-value 64
list-max-ziplist-entries 512
list-max-ziplist-value 64
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
activerehashing yes
//重命名危险命令,安全性
rename-command config d6adsfk_config
rename-command slaveof d6adsfk_slaveof
rename-command flushall d6adsfk_flushall
rename-command flushdb d6adsfk_flushdb
##rename-command shutdown d6adsfk_shutdown
注:可以在vi的非编辑模式下使用正则批量替换端口:%s/6379/7001/g enter即可。7002-7006类似,修改对应配置文件的端口即可。
4)启动六个节点:
#/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7001/redis.conf &
#/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7002/redis.conf &
#/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7003/redis.conf &
#/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7004/redis.conf &
#/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7005/redis.conf &
#/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7006/redis.conf &
#ps -ef | grep redis //查看启动的进程
5)创建集群:
#redis-trib.rb create --replicas 1 192.168.0.132:7001 192.168.0.132:7002 192.168.0.132:7003 192.168.0.132:7004 192.168.0.132:7005 192.168.0.132:7006
>>> Creating cluster
>>> Performing hash slots allocation on 6 nodes...
Using 3 masters:
192.168.0.132:7001
192.168.0.132:7002
192.168.0.132:7003
Adding replica 192.168.0.132:7004 to 192.168.0.132:7001
Adding replica 192.168.0.132:7005 to 192.168.0.132:7002
Adding replica 192.168.0.132:7006 to 192.168.0.132:7003
M: 05244e4d6b721a733073b2a1ac7dc9f7a4145522 192.168.0.132:7001
slots:0-5460 (5461 slots) master
M: 5c3ed822213f1675e8e93911a12040f34844cf94 192.168.0.132:7002
slots:5461-10922 (5462 slots) master
M: 982985a7ad0f9b5800fc9315cc051d717bc870df 192.168.0.132:7003
slots:10923-16383 (5461 slots) master
S: 985b7e1b8a1c8e311c5d4ba2df3a455a18a6c2e6 192.168.0.132:7004
replicates 05244e4d6b721a733073b2a1ac7dc9f7a4145522
S: a688a187013bb6c7f22549fadda8eacc9dec6ec4 192.168.0.132:7005
replicates 5c3ed822213f1675e8e93911a12040f34844cf94
S: 550989f26bb0456df068e8d9c1a3476607b91dba 192.168.0.132:7006
replicates 982985a7ad0f9b5800fc9315cc051d717bc870df
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join....
>>> Performing Cluster Check (using node 192.168.0.132:7001)
M: 05244e4d6b721a733073b2a1ac7dc9f7a4145522 192.168.0.132:7001
slots:0-5460 (5461 slots) master
1 additional replica(s)
S: a688a187013bb6c7f22549fadda8eacc9dec6ec4 192.168.0.132:7005
slots: (0 slots) slave
replicates 5c3ed822213f1675e8e93911a12040f34844cf94
M: 5c3ed822213f1675e8e93911a12040f34844cf94 192.168.0.132:7002
slots:5461-10922 (5462 slots) master
1 additional replica(s)
S: 550989f26bb0456df068e8d9c1a3476607b91dba 192.168.0.132:7006
slots: (0 slots) slave
replicates 982985a7ad0f9b5800fc9315cc051d717bc870df
S: 985b7e1b8a1c8e311c5d4ba2df3a455a18a6c2e6 192.168.0.132:7004
slots: (0 slots) slave
replicates 05244e4d6b721a733073b2a1ac7dc9f7a4145522
M: 982985a7ad0f9b5800fc9315cc051d717bc870df 192.168.0.132:7003
slots:10923-16383 (5461 slots) master
1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
其中,前三个 ip:port 为master节点,后三个ip:port为slave节点。创建过程中需要输入一次:yes。出现上面输出的信息表示安装成功。
6)验证集群:
连接7002这个master节点进行操作:
#redis-cli -h 192.168.0.132 -c -p 7002
注:set数据和get数据的时候转向时自动完成的,无需用户切换。所以不管连接到哪个节点上进行操作都会返回数据并跳转到该数据分片的节点上。
说明集群运行正常,到此Redis的集群环境和简单实用操作结束。
参考连接:http://www.cnblogs.com/wuxl360/p/5920330.html
redis集群(单机6节点实现)的更多相关文章
- 峰Redis学习(10)Redis 集群(单机多节点集群和多机多节点集群)
单机多节点集群:参考博客:http://blog.java1234.com/blog/articles/326.html 多机多节点集群:参考博客:http://blog.java1234.com/b ...
- Redis 集群环境添加节点失败问题
最近在给公司网管系统Redis集群环境添加节点时候遇到一个问题,提示新增的Node不为空: [root@node00 src]# ./redis-trib.rb add-node --slave -- ...
- windows下配置redis集群,启动节点报错:createing server TCP listening socket *:7000:listen:Unknown error
windows下配置redis集群,启动节点报错:createing server TCP listening socket *:7000:listen:Unknown error 学习了:https ...
- redis集群添加删除节点
Redis3.0集群添加节点 1:首先把需要添加的节点启动 cd /usr/local/cluster/ mkdir 7006 cp /usr/local/cluster/redis.conf /u ...
- redis 集群添加新节点
准备好需要添加的节点:如何创建节点 启动创建的节点: 启动成功: 添加新节点:redis-cli --cluster add-node 127.0.0.1:7006 127.0.0.1:7000 第 ...
- redis集群添加新节点
一.创建节点(接上文) 1.在H1服务器/root/soft目录下创建7002目录 2.将7001目录的配置文件redis.conf拷贝到7002,并修改配置文件的端口 3.进入 redis-5.0. ...
- Redis集群环境各节点无法互相发现与Hash槽分配异常 CLUSTERDOWN Hash slot not served的解决方式
总结/朱季谦 在搭建Redis5.x版本的集群环境曾出现各节点无法互相发现与Hash槽分配异常 CLUSTERDOWN Hash slot not served的情况,故而把解决方式记录下来. 在以下 ...
- springBoot2.*使用redis集群/单机方法
在springboot1.x系列中,其中使用的是jedis,但是到了springboot2.x其中使用的是Lettuce. 此处springboot2.x,所以使用的是Lettuce.关于jedis跟 ...
- 如何确定Redis集群中各个节点的主从关系
1.首先通过命令(以192.168.203.141为例,-c代表集群的意思) ./redis-cli -h 192.168.203.141 -p 8001 -c 2.然后在输入 cluster no ...
- Redis集群中的节点如何保证数据一致
主从复制: 1.redis的复制功能是支持多个数据库之间的数据同步.一类是主数据库(master)一类是从数据库(slave),主数据库可以进行读写操作,当发生写操作的时候自动将数据同步到从数据库,而 ...
随机推荐
- 淘宝开源Key/Value结构数据存储系统Tair技术剖析
摘要: Tair的功能 Tair是一个Key/Value结构数据的解决方案,它默认支持基于内存和文件的两种存储方式,分别和我们通常所说的缓存和持久化存储对应. Tair除了普通Key/Value系统提 ...
- Ptypes一个开源轻量级的c++库,包括对一些I/O操作、网络通信、多线程和异常处理的封装
C++开源项目入门级:Ptypes Ptypes一个开源轻量级的c++库,包括对一些I/O操作.网络通信.多线程和异常处理的封装.虽然代码有限,包括的内容不少,麻雀虽小,五脏俱全. 提高: ...
- IdHTTP设置SSL证书,乱码问题也解决了
要跟银行做接口,需要使用delphi来post数据,但对方提供的是https开头的网址,需要使用证书,对方已提供证书了,但是还是调用不成功,使用的是idhttp和TIdSSLIOHandlerSock ...
- VPS用来配置上网外,还可以做一个同步盘
我曾经在一个活动的博文里说过,男人必须要有一个VPS和一个树莓派,VPS这个东西,以后会是中国男人的一种必备技能,今天又有一个小伙伴请教我VPS的用法,我就简单说说我目前使用的情况.首先我希望你能有点 ...
- JavaScript语言核心--词法结构
编程语言的词法结构是一套基础性规则,用来描述如何使用这门语言来编写程序.作为语法的基础,它规定了诸如变量名是什么样的.怎么写注释,以及程序语言之间如何分隔等规则. 1. 字符集 JavaScript程 ...
- CEGUI 0.7.7 VS2010+SP3 编译过程
1 在官方网站http://www.cegui.org.uk/ 下载最新的CEGUI 源代码 版本是0.7.7 2 下载编译需要用到的依赖文件包 将解压后的文件夹 Dependencies 和CEGU ...
- 30+简约和平铺的WordPress复古主题
现在复古风格的设计非常流行,你可以快速建立属于自己的复古风格的网站.继续阅读下去,我们将展示给你一些精彩的WordPress复古主题. 多年来,网页设计师们纷纷用3D效果,纹理,噪声,渐变的灯光效果, ...
- DOM模型-属性操作
HTML 元素包括标签名和若干个键值对,这个键值对就称为"属性"(attribute)."属性"本身是一个对象(Attr对象),但是实际上,这个对象极少使用.一 ...
- 解析《Effective Java》之多个构造器、Javabeans模式和Builder模式
最近看<Effective Java>这本被很多同行称为神作的书,但是这本书很多地方缺少了举例不好懂,下面是关于我对书上知识的理解. 一.<Effective Java>中文版 ...
- netty服务端启动--ServerBootstrap源码解析
netty服务端启动--ServerBootstrap源码解析 前面的第一篇文章中,我以spark中的netty客户端的创建为切入点,分析了netty的客户端引导类Bootstrap的参数设置以及启动 ...