RabbitMQ 集群之镜像同步
mirrored
在上个博文中讲到了如果做集群,那么集群是成功了,但是queue是如何存放的呢?消息又是怎么同步呢。
默认的,也就是什么也不配置,直接在某个节点中添加一个queue,那么它仅仅是属于这个节点的。其它节点有的只是它的影子。所以像断线重连、操作恢复是无法做到的,实验证明确实是这样的。声明queue的节点关闭那么是无法再进行发布消息与消费的。这自然失去了集群的意义
所以default模式一般是不会进行使用的,我们的选择是 镜像节点
queue mirror 也就是说,也就是 会有一个 master 对应零个或多个 slave
也可以说成主从复制,每个节点都有着相同的数据,某个节点挂掉了,另一个可以立即顶上
官方的文档也可以看到,镜像的配置是通过 policy 策略的方式
我们有三种同步的方式,一般来说 all 是我们的最佳选择
all 所有的节点都将被同步
exactly 指定个数的节点被同步
nodes 指定的名称的节点被同步
一个简单的示例,下面使用的是ha-all 是我们的策略名称,后面的是^ha\. 则是一个正则,queue名满足这个规则的,将被做镜像。方式是所有的节点都被同步
这里需要说明的是 策略 可以被应用到exchange与queue上面,也可以选择只被应用到哪个上面,下面的命令则是exchange与queue都被应用到了
- rabbitmqctl set_policy ha-all "^ha\." "{""ha-mode"":""all""}"
翻看文档,似乎没有提供apply to 的参数,所以下面的操作都将使用WEB UI可以看到WEB UI的创建策略给我们提供了丰富的选项,比如Apply to,优先级,等其它设置
我们需要关注提上图中 关于 HA的参数
Ha mode 同步方式
Ha params 选择其它同步方式的参数 比如节点名
Ha async mode 同步方式,这个需要详细说明的,默认的情况下。当节点断线后那么这个节点就已经是落后的版本,当我们再去启动节点的时候数据我们需要去手动的同步,这自然是不好的,做到自动化是最完美的,所以设置成automatic是最佳选择
下面设置一个作用与queue,集群中的所有节点将被同步,并且断线重启后自动同步的的策略
设置完毕后,就可以通过代码来看看效果了,因为使用了集群,所以创建connection的时候需要做些变化了,创建连接的时候把节点的ip放了进去。
AutomaticRecoveryEnabled 断线重连,也就是如果当前的连接断开了,将会尝试重连
TopologyRecoveryEnabled 重连后恢复当前的工作进程,比如channel、queue、发布的消息进度等
- var factory = new ConnectionFactory()
- {
- UserName = "admin",
- Password = "admin",
- AutomaticRecoveryEnabled = true,
- TopologyRecoveryEnabled = true
- };
- Connection = factory.CreateConnection(new string[3] { "192.168.1.115", "192.168.1.113", "192.168.1.123" });
这里声明了一个test1queue,然后进行发布消息,当节点崩溃,代码自然也会异常。所以try catch起来,但是没关系。因为我们已经设置了断线重连,所以一会儿,就会恢复如常
- //创建返回一个新的频道
- using (var channel = RabbitMqHelper.GetConnection().CreateModel())
- {
- channel.QueueDeclare("test1", true, false, false, null);
- var properties = channel.CreateBasicProperties();
- properties.Persistent = true;
- for (var i = 0; i < 10000; i++)
- {
- try
- {
- channel.BasicPublish(string.Empty, "test1", properties, Encoding.UTF8.GetBytes($"这是{i}个消息"));
- Thread.Sleep(1000);
- Console.WriteLine($"发布消息 {i}");
- }
- catch (Exception ex)
- {
- Console.WriteLine(ex.Message);
- i--;
- }
- }
- }
程序运行后,在WEB UI中已经可以看到了,主节点是rabbimq1,剩下的是从节点。
可以看到现在连接到的节点是rabbitmq2,现在我们可以手动的把它挂掉
可以看到应用程序一直在报错,就这么报了一会,然后又继续发布消息了。这样就保证了我们消息队列的高可用、高可靠
RabbitMQ 集群之镜像同步的更多相关文章
- rabbitmq集群和镜像队列
Rabbitmq集群和镜像队列 1引言 1.1编写目的 2 原理和使用 2.1镜像队列原理 2.1.1 原理 默认的一个rabbitmq中的queue是在一个node上的,至于在那个node上取决于c ...
- RabbitMQ集群、镜像部署配置
1 RABBITMQ简介及安装 RabbitMQ是一个开源的AMQP实现,服务器端用Erlang语言编写,支持多种客户端,如:Python.Ruby..NET.Java.JMS.C.PHP.Act ...
- RabbitMQ集群架构(HA)并结合.NET Core实操
一.前言 已经一年没有更新博客了,由于公司事务比较多,并且楼主我也积极在公司项目中不断实践.net core.DDD以及Abp vnext,也积累了一些吐血经验,目前我在做一家在线教育公司负责智慧校园 ...
- RabbitMQ 集群原理
RabbitMQ默认集群原理 rabbitmq 本身是基于erlang编写,erlang语言天生具备分布式的特性(通过同步Erlang集群各节点的erlang cookie实现),RabbiteMQ天 ...
- RabbitMQ 集群原理和完善
一.RabbitMQ集群方案的原理 RabbitMQ这款消息队列中间件产品本身是基于Erlang编写,Erlang语言天生具备分布式特性(通过同步Erlang集群各节点的magic cookie来实现 ...
- rabbitmq集群搭建方法简介(测试机linux centos)【转】
本文将介绍四台机器搭建rabbitmq集群: rabbitmq IP和主机名(每台机器已安装RabbitMQ 3.5.6, Erlang 18.1) 192.168.87.73 localhost73 ...
- RabbitMQ入门教程(十五):普通集群和镜像集群
原文:RabbitMQ入门教程(十五):普通集群和镜像集群 版权声明:本文为博主原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明. 本文链接:https://blog.c ...
- docker-compose安装rabbitmq集群(主从集群---》镜像集群)
docker-compose安装rabbitmq集群(主从集群--->镜像集群) yls 2020/5/11 创建docker-compose.yml 文件 version: '3' servi ...
- rabbitmq集群搭建,镜像队列搭建
原文地址:https://www.jianshu.com/p/11963564dd3d 教你如何从0开始搭建rabbitmq集群 一.准备工作 1.三台centos虚拟机 2.三台虚拟机都安装了doc ...
随机推荐
- CSS3新特性应用之用户体验
一.光标 新增加not-allowed光标,不允许访问 隐藏光标,在触模应用上很有用,css2.1需要一个透明的图片来实现,而css3直接用cursor:none即可. 完整代码: curosr: u ...
- android 自定义通知栏
package com.example.mvp; import cn.ljuns.temperature.view.TemperatureView;import presenter.ILoginPre ...
- Linux常见查看硬件信息指令
CPUlscpu 查看的是CPU的统计信息./proc/cpuinfo 查看每个cpu信息,如每个CPU的型号,主频等. 内存free -m 概要查看内存情况cat /proc/meminfo 查看内 ...
- VNC connect:Connection refused(10061)
在Windows机器上使用VNC Viewer访问Linux服务器,有时候会遇到"connect:Connection refused(10061)"这个错误,导致这个错误出现的原 ...
- 分布式一致性算法--Raft
前面一篇文章讲了Paxos协议,这篇文章讲它的姊妹篇Raft协议,相对于Paxos协议,Raft协议更为简单,也更容易工程实现.有关Raft协议和工程实现可以参考这个链接https://raft.gi ...
- 虚拟机环境下安装ESX不能安装虚拟系统解决方案
在虚拟机环境(ESX.workstation等)下安装ESX或workstation等虚拟机,在虚拟机上再安装操作系统,会提示“虚拟系统不能启动,直到你配置了外部虚拟机(vmware esx in a ...
- 织梦Dedecms使用Nginx的安全设置
首先需要说明的是,任何程序都是有漏洞的,我们需要做好一些必要的防范,来减少由于程序漏洞造成的损失.织梦的漏洞多,这个是很多人的想法.不过大家如果做好了织梦系统的文件夹权限什么的设置,很多漏洞也是用不上 ...
- 安装vsphere5.1
安装vsphere5.1 安装前的准备(环境) 一台域控制器 一台sql2008数据库 整个环境都是在域环境中的 二.安装vCenter服务 在数据库里创建一个数据库,名字就叫vCenter 1.添加 ...
- 【Linux】AWK入门
什么是AWK AWK是一种用于处理文本的编程语言工具,一个模式匹配程序.一个典型的示例是将数据转换成格式化的报告. 在命令行输入如下awk命令: awk -F":" '{ prin ...
- 30天的php学习之路——第一天开端
因项目紧急只留给了我4周时间学习php.谨以此文记录我的php学习历程,仅供参考,若有错误请指正. 之前对php有过一些了解,一些语法和习惯和C#差距有些大,所以第一天准备对php中的符号有个全面的了 ...