一.redis主从复制背景问题

Redis主从复制可将主节点数据同步给从节点,从节点此时有两个作用:

(1)一旦主节点宕机,从节点作为主节点的备份可以随时顶上来。

(2)扩展主节点的读能力,分担主节点读压力。

但是问题是:

一旦主节点宕机,从节点上位,那么需要人为修改所有应用方的主节点地址(改为新的master地址),还需要命令所有从节点复制新的主节点

那么这个问题,redis-sentinel就可以解决了

二. Redis-Sentinel

Redis-Sentinel是redis官方推荐的高可用性解决方案,

当用redis作master-slave的高可用时,如果master本身宕机,redis本身或者客户端都没有实现主从切换的功能。

而redis-sentinel就是一个独立运行的进程,用于监控多个master-slave主从复制,

自动发现master宕机,进行自动切换slave > master。

sentinel主要功能如下:

不时的监控redis是否良好运行,如果节点不可达就会对节点进行下线标识

如果被标识的是主节点,sentinel就会和其他的sentinel节点“协商”,如果其他节点也人为主节点不可达,就会选举一个sentinel节点来完成自动故障转义

在master-slave进行切换后,master_redis.conf、slave_redis.conf和sentinel.conf的内容都会发生改变,即master_redis.conf中会多一行slaveof的配置,sentinel.conf的监控目标会随之调换

三.Sentinel的工作方式

每个Sentinel以每秒钟一次的频率向它所知的Master,Slave以及其他 Sentinel 实例发送一个 PING 命令

如果一个实例(instance)距离最后一次有效回复 PING 命令的时间超过 down-after-milliseconds 选项所指定的值, 则这个实例会被 Sentinel 标记为主观下线。

如果一个Master被标记为主观下线,则正在监视这个Master的所有 Sentinel 要以每秒一次的频率确认Master的确进入了主观下线状态。

当有足够数量的 Sentinel(大于等于配置文件指定的值)在指定的时间范围内确认Master的确进入了主观下线状态, 则Master会被标记为客观下线

在一般情况下, 每个 Sentinel 会以每 10 秒一次的频率向它已知的所有Master,Slave发送 INFO 命令

当Master被 Sentinel 标记为客观下线时,Sentinel 向下线的 Master 的所有 Slave 发送 INFO 命令的频率会从 10 秒一次改为每秒一次

若没有足够数量的 Sentinel 同意 Master 已经下线, Master 的客观下线状态就会被移除。

若 Master 重新向 Sentinel 的 PING 命令返回有效回复, Master 的主观下线状态就会被移除。

主观下线和客观下线

主观下线:Subjectively Down,简称 SDOWN,指的是当前 Sentinel 实例对某个redis服务器做出的下线判断。

客观下线:Objectively Down, 简称 ODOWN,指的是多个 Sentinel 实例在对Master Server做出 SDOWN 判断,并且通过 SENTINEL is-master-down-by-addr 命令互相交流之后,得出的Master Server下线判断,然后开启failover.

SDOWN适合于Master和Slave,只要一个 Sentinel 发现Master进入了ODOWN, 这个 Sentinel 就可能会被其他 Sentinel 推选出, 并对下线的主服务器执行自动故障迁移操作。

ODOWN只适用于Master,对于Slave的 Redis 实例,Sentinel 在将它们判断为下线前不需要进行协商, 所以Slave的 Sentinel 永远不会达到ODOWN。

四.Redis Sentinel架构

redis的一个进程,但是不存储数据,只是监控redis

sentinel 会通过命令连接向被监视的主从服务器发送 “hello”信息,该信息包含sentinel的ip,端口号,id等内容,以此来向其他sentinel宣告自己的存在。与此同时sentinel会通过订阅连接接收其他sentinel的”hello”信息,以此来发现监视同一个主服务器的其他sentinel。

从图中sentinel1 通过发送hello信息来让sentinel2和sentinel3发现自己,其他两个sentinel也会进行类似的操作。

redis主库服务故障,主从复制重新判断主从结构的过程

1.redis命令整理

官网地址:http://redisdoc.com/

redis-cli info #查看redis数据库信息

redis-cli info replication #查看redis的复制授权信息

redis-cli info sentinel   #查看redis的哨兵信息

2.配置哨兵模式redis sentinel实现主从复制及自动切换过程

配置个redis数据库, 一主

环境:

192.168.1.209  配置了1主2从

192.168.1.209  配置了2从

(注意由于虚拟机上配置,虚拟机有限,所以将一台服务配置多个从库,生产从不会是这样的,生产中都是一个库一台服务器的)

(1)主从库配置文件如下

192.168.1.209 主库

  1. # 声明端口
  2. port
  3. # 表示后台启动
  4. daemonize yes
  5. # 将pid文件放到某目录下
  6. pidfile /data//redis.pid
  7. # 日志级别和日志目录
  8. loglevel notice
  9. logfile "/data/6379/redis.log"
  10. # 持久化相关
  11. # dir /data/
  12. # 安全模式
  13. protected-mode no
  14. # 密码设置,redis一般不要密码
  15. # requirepass hsz

192.168.1.209 从库1   6380端口

  1. # 声明端口
  2. port
  3. # 表示后台启动
  4. daemonize yes
  5. # 将pid文件放到某目录下
  6. pidfile /data//redis.pid
  7. # 日志级别和日志目录
  8. loglevel notice
  9. logfile "/data/6380/redis.log"
  10. # 持久化相关
  11. # dir /data/
  12. # 安全模式
  13. protected-mode no
  14. # 密码设置,redis一般不要密码
  15. # requirepass hsz
  16.  
  17. slaveof 192.168.1.209

192.168.1.209 从库2 6381 端口

  1. # 声明端口
  2. port
  3. # 表示后台启动
  4. daemonize yes
  5. # 将pid文件放到某目录下
  6. pidfile /data//redis.pid
  7. # 日志级别和日志目录
  8. loglevel notice
  9. logfile "/data/6381/redis.log"
  10. # 持久化相关
  11. # dir /data/
  12. # 安全模式,如果开启文件不会被修改
  13. protected-mode no
  14. # 密码设置,redis一般不要密码
  15. # requirepass hsz
  16.  
  17. dir /data//
  18. dbfilename dbmp.rdb
  19. save
  20. save
  21. save
  22. slaveof 192.168.1.209

192.168.1.208 从库1 6381端口

  1. port
  2. daemonize yes
  3. pidfile /data//redis.pid
  4. loglevel notice
  5. logfile "/data/6381/redis.log"
  6. dbfilename dump.rdb
  7. dir /data/
  8. protected-mode no
  9. # 主库ip和端
  10. slaveof 192.168.1.209

192.168.1.208 从库1 6382端口

  1. port
  2. daemonize yes
  3. pidfile /data//redis.pid
  4. loglevel notice
  5. logfile "/data/6382/redis.log"
  6. dbfilename dump.rdb
  7. dir /data/
  8. protected-mode no
  9. # 主库ip和端口
  10. slaveof 192.168.1.209

做好配置文件后都进行redis启动

redis-server redis配置文件名

最后确定主从信息及关系:

(2)配置个哨兵

在配置之前首先进行学习下,配置哨兵的配置文件的各项解析:

  1. # Sentinel节点的端口
  2.  
  3. port
  4.  
  5. dir /var/redis/data/
  6.  
  7. logfile "26379.log"
  8.  
  9. # sentinel announce-ip 127.0.0.1 # 宣告哨兵IP, 此配置只有当使用非127.0.0.1的IP配置哨兵无法成功时加上,同时redis三个服务端也需要同步修改IP
  10.  
  11. # 当前Sentinel节点监控 127.0.0.1: 这个主节点
  12.  
  13. # 2代表判断主节点失败至少需要2个Sentinel节点节点同意
  14.  
  15. # mymaster是主节点的别名
  16.  
  17. sentinel monitor mymaster 127.0.0.1
  18.  
  19. # 每个Sentinel节点都要定期PING命令来判断Redis数据节点和其余Sentinel节点是否可达,如果超过30000毫秒30s且没有回复,则判定不可达
  20.  
  21. sentinel down-after-milliseconds mymaster
  22.  
  23. # 当Sentinel节点集合对主节点故障判定达成一致时,Sentinel领导者节点会做故障转移操作,选出新的主节点,原来的从节点会向新的主节点发起复制操作,限制每次向新的主节点发起复制操作的从节点个数为1
  24.  
  25. sentinel parallel-syncs mymaster
  26.  
  27. # 故障转移超时时间为180000毫秒
  28.  
  29. sentinel failover-timeout mymaster
  30.  
  31. daemonize yes

关于哨兵的配置,将5个哨兵配置到两台上,一台3个一台2个

那么接下来哨兵1配置(由于和主机同一台所以配置127.0.0.1):

# vim redis-sentinel-26379.conf

  1. port
  2.  
  3. dir /var/redis/data/
  4.  
  5. logfile "26379.log"
  6.  
  7. sentinel monitor mymaster 192.168.1.209
  8.  
  9. sentinel down-after-milliseconds mymaster
  10.  
  11. sentinel parallel-syncs mymaster
  12.  
  13. sentinel failover-timeout mymaster
  14.  
  15. daemonize yes

启动之前新建日志目录

#mkdir -p /var/redis/data/

使用以下命令启动redis-sentinel

# redis-sentinel redis-sentinel-26379.conf

然后进行查看通信状态:# redis-cli -p 26379 info sentinel

可以从信息看出,有一台主库,ip及端口,4台从库,和1个哨兵,因为才配置一个,所有哨兵为

哨兵2配置:

# vim redis-sentinel-26380.conf

  1. port
  2.  
  3. dir /var/redis/data/
  4.  
  5. logfile "26380.log"
  6.  
  7. sentinel monitor mymaster 192.168.1.209
  8.  
  9. sentinel down-after-milliseconds mymaster
  10.  
  11. sentinel parallel-syncs mymaster
  12.  
  13. sentinel failover-timeout mymaster
  14.  
  15. daemonize yes

启动之前新建日志目录

# mkdir -p /var/redis/data/

使用以下命令启动redis-sentinel

# redis-sentinel redis-sentinel-26380.conf

然后进行查看通信状态:# redis-cli -p 26380 info sentinel

哨兵3配置

# vim redis-sentinel-26380.conf

  1. port
  2.  
  3. dir /var/redis/data/
  4.  
  5. logfile "26380.log"
  6.  
  7. sentinel monitor mymaster 192.168.1.209
  8.  
  9. sentinel down-after-milliseconds mymaster
  10.  
  11. sentinel parallel-syncs mymaster
  12.  
  13. sentinel failover-timeout mymaster
  14.  
  15. daemonize yes

启动之前新建日志目录

# mkdir -p /var/redis/data/

使用以下命令启动redis-sentinel

# redis-sentinel redis-sentinel-26380.conf

然后进行查看通信状态:# redis-cli -p 26380 info sentinel

哨兵4配置

# vim redis-sentinel-26381.conf

  1. port
  2.  
  3. dir /var/redis/data/
  4.  
  5. logfile "26381.log"
  6.  
  7. sentinel monitor mymaster 192.168.1.209
  8.  
  9. sentinel down-after-milliseconds mymaster
  10.  
  11. sentinel parallel-syncs mymaster
  12.  
  13. sentinel failover-timeout mymaster
  14.  
  15. daemonize yes

启动之前新建日志目录

# mkdir -p /var/redis/data/

使用以下命令启动redis-sentinel

# redis-sentinel redis-sentinel-26381.conf

然后进行查看通信状态:# redis-cli -p 26381 info sentinel

哨兵5配置

# vim redis-sentinel-26382.conf

  1. port
  2.  
  3. dir /var/redis/data/
  4.  
  5. logfile "26382.log"
  6.  
  7. sentinel monitor mymaster 192.168.1.209
  8.  
  9. sentinel down-after-milliseconds mymaster
  10.  
  11. sentinel parallel-syncs mymaster
  12.  
  13. sentinel failover-timeout mymaster
  14.  
  15. daemonize yes

启动之前新建日志目录

# mkdir -p /var/redis/data/

使用以下命令启动redis-sentinel

# redis-sentinel redis-sentinel-26382.conf

然后进行查看通信状态:# redis-cli -p 26382 info sentinel

最后可以查看下哨兵的配置文件,会自动加上这些内容:

而从库的配置文件会修改为这一句配置:

(3)进行redis高可用故障实验

关闭主库进程(模拟生产中服务器挂掉)如下截图:

此时进行等待30秒。。。。

从其中一个哨兵进行查看

查看可知:新的主库为192.168.1.209:6381

# redis-cli -p 6381 info replication

到这个redis主库进行查看信息,并查看数据,可知从库可同步数据:

最后高可用实现

redis 之redis-sentinel主从复制高可用的更多相关文章

  1. Redis Sentinel主从高可用方案

    Redis Sentinel主从高可用方案 本文介绍一种通过Jed和Sentinel实现Redis集群(主从)的高可用方案,该方案需要使用Jedis2.2.2及以上版本(强制),Redis2.8及以上 ...

  2. 使用Docker Compose部署基于Sentinel的高可用Redis集群

    使用Docker Compose部署基于Sentinel的高可用Redis集群 https://yq.aliyun.com/articles/57953 Docker系列之(五):使用Docker C ...

  3. 11.Redis 哨兵集群实现高可用

    作者:中华石杉 Redis 哨兵集群实现高可用 哨兵的介绍 sentinel,中文名是哨兵.哨兵是 redis 集群机构中非常重要的一个组件,主要有以下功能: 集群监控:负责监控 redis mast ...

  4. redis-3.0.1 sentinel 主从高可用 详细配置

    最近项目上线部署,要求redis作高可用,由于redis cluster还不是特别成熟,就选择了redis sentinel做高可用.redis本身有replication,实现主从备份.结合sent ...

  5. Redis Sentinel实现高可用配置

    一般情况下yum安装redis的启动目录在:”/usr/sbin” :配置目录在”/etc/redis/”在其目录下会有默认的redis.conf和redis-sentinel.conf redis高 ...

  6. (转)基于Redis Sentinel的Redis集群(主从&Sharding)高可用方案

    转载自:http://warm-breeze.iteye.com/blog/2020413 本文主要介绍一种通过Jedis&Sentinel实现Redis集群高可用方案,该方案需要使用Jedi ...

  7. 基于Redis Sentinel的Redis集群(主从Sharding)高可用方案(转)

    本文主要介绍一种通过Jedis&Sentinel实现Redis集群高可用方案,该方案需要使用Jedis2.2.2及以上版本(强制),Redis2.8及以上版本(可选,Sentinel最早出现在 ...

  8. 基于Redis Sentinel的Redis集群(主从&Sharding)高可用方案

    本文主要介绍一种通过Jedis&Sentinel实现Redis集群高可用方案,该方案需要使用Jedis2.2.2及以上版本(强制),Redis2.8及以上版本(可选,Sentinel最早出现在 ...

  9. redis 学习笔记(4)-HA高可用方案Sentinel配置

    上一节中介绍了master-slave模式,在最小配置:master.slave各一个节点的情况下,不管是master还是slave down掉一个,“完整的”读/写功能都将受影响,这在生产环境中显然 ...

随机推荐

  1. nested exception is org.apache.ibatis.binding.BindingException: Parameter 'cons_id' not found. Available parameters are [arg2, arg1, arg0, param3, param1, param2]

    修改DAO层的类中的方法,如下所示:

  2. 迭代器,for循环本质,生成器,常用内置方法,面向过程编程

    一.迭代器 1.迭代:更新换代(重复)的过程,每次的迭代都必须基于上一次的结果 迭代器:迭代取值的工具 2.迭代器给你提供了一种不依赖于索引取值的方式 3.可以迭代取值的对象:字符串,列表,元组,字典 ...

  3. vue的页面怎么显示到android的webview中

    链接:https://www.jianshu.com/p/0dd98476bba0

  4. Floyd-Warshall

    Description 第一行四个数为n,m,n表示顶点个数,m表示边的条数. 接下来m行,每一行有三个数t1.t2 和t3,表示顶点t1到顶点t2的路程是t3.请注意这些t1->t2是单向的. ...

  5. centsos 7 删除自带jdk安装自定义jdk8

    甲骨文官网地址:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 如何清除自带j ...

  6. sql语句查询指定月份数据

    要求:查询出emp表中1981年2月份入职的员工 emp表 常用的两种方式: 1.YEAR查询年,MONTH查询月 SELECT * FROM emp WHERE ' 2.date_format (使 ...

  7. python的组合数据

    python的组合数据包括:1.列表list[   ] 2.元组tuple(),3.字典dict{"x":"y"},4.集合set{} 1.创造组合数据:均可直 ...

  8. 6.Python字符串

    #header { display: none !important; } } #header-spacer { width: 100%; visibility: hidden; } @media p ...

  9. Emprie 使用基础笔记

    0x01 简介 empire 是一个后渗透攻击框架,具有加密通信和灵活框架的功能.Empire可以在不需要Powershell.exe的情况下执行PowerShell代理,后期利用的模块很强大,如sc ...

  10. 【原】rsync使用

    在使用jenkins当跳板机的场景下,有使用git pull 代码到jenkins机器后,需要将代码复制到另一台机器上,常用的复制命令有scp和rsync:现就使用到了rsync进行详解: rsync ...