rabbitmq用于分布式系统
上文介绍了RabbitMQ在linux下的安装,这里就简单的介绍一下基于RabbitMQ的开发。RabbitMQ已经提供了一大坨材料。
- Java – http://www.RabbitMQ.com/java-client.html
- .NET – http://www.RabbitMQ.com/dotnet.html
- Erlang– http://www.RabbitMQ.com/erlang-client.html
这里使用的RabbitMQ提供的Java的包。
RabbitMQ提供的Java AMQP Client Libaray,最核心的class是ConnectionFactory、Conncetion 和Channel, 分别代表连结工厂、一个连结和一个数据通道。
AMQP支持在一个TCP连接上启用多个MQ通信channel,每个channel都可以被应用作为通信流。每个AMQP程序至少要有一个connection和一个channel。
分布式的消息服务器肯定是要有Producer和Comsumer的。那怎么基于RabbitMQ构建一个Comsumer呢?
ConnectionFactory factory = new ConnectionFactory();
factory.setUsername(userName);
factory.setPassword(password);
factory.setVirtualHost(virtualHost);
factory.setHost(hostName);
factory.setPort(portNumber);
Connection conn = factory.newConnection();
or
ConnectionFactory factory = new ConnectionFactory();
factory.setUri("amqp://userName:password@hostName:portNumber/virtualHost");
Connection conn = factory.newConnection();
上述的代码,创建了一个connnection,开发者可以在一个connnection创建多个channel。每个channel都被分配了一个整数标识,自动由Connection类的createChannel()方法维护。或者,你可以使用.createChannel(x)来指定channel标识,其中x是你想要使用的channel标识。通常情况下,推荐使用.channel()方法来自动分配channel标识,以便防止冲突。channel用于传递、接收消息。如下代码:
Channel channel = conn.createChannel();
另外,获取connection时候,consumer线程默认自动分配一个 ExceutorService thread pool,如果你需要自己控制线程池的。你可以如下定义:
ExecutorService es = Executors.newFixedThreadPool(20);
Connection conn = factory.newConnection(es);
但是需要注意的是:当connection shutdown的时候,默认分配的ExecutorService会自动shutdown,用户自己定义的不会shutdown,需要手动shutdown。而且,只用在Consumer回调有严重的性能瓶颈的时候才用这种方式,在平常的使用中,默认的分配更加高效。
现在,我们已经有了一个可用的连结和channel,我们来创建一个队列。
//queueDeclare(String queue, boolean durable, boolean exclusive, boolean autoDelete,Map<String, Object> arguments) throws IOException;
channel.queueDeclare(”vinoQueue",true,false,false,null);
它创建了一个名叫“vinoQueue”的队列,它是non-durable的(重启之后不会重新建立),并且最后一个消费者断开的时候不会自动删除(autoDelete=False)。在创建durable的队列(或者交换机)的时候,将auto_delete设置成false是很重要的,否则队列将会在最后一个消费者断开的时候消失。另外,还有一个属性是”exclusive“,该属性如果设置成True,只有创建这个队列的消费者程序才允许连接到该队列,这种队列对于这个消费者程序是私有的。
现在队列已经创建成功了,Comsumer有两种方式从队列中取出消息。
一个是调用 channel.basicGet(“vinoQueue”, false)主动从队列中拉出下一个消息。如果队列中无消息,会返回null,代码如下所示:
// GetResponse basicGet(String queue, boolean autoAck) throws IOException; 主动从队列里拉出下一条消息。
channel.basicGet(QUEUE_NAME, false);
另一个是消息队列把消息推给Cumsumer。这种情况你就需要用如下代码。
//消费者用于获取消息信道绑定的消息队列中的信息
QueueingConsumer consumer = new QueueingConsumer(channel);
//注册一个新消息到达的回调,第二个参数表示ack,默认是false.
channel.basicConsume(QUEUE_NAME, true,consumer); while(true){
//循环获取消息队列中的信息,这个函数会等待在队列上,直到下一个消息到达队列。
QueueingConsumer.Delivery delivery = consumer.nextDelivery();
String message = new String(delivery.getBody());
System.out.println("[x] Received '"+message+"'"); }
/用来注销该回调函数,参数consumer_tag 当中指定的字符串和chan.basicConsume() 注册的一致,这里无用。
//channel.basicCancel(QUEUE_NAME);
这里具体的说一下channel.basicConsume()里的ack参数。当从队列当中取出一个消息的时候,RabbitMQ需要应用显式地回馈说已经获取到了该消息。如果一段时间内不回馈,RabbitMQ会将该消息重新分配给另外一个绑定在该队列上的消费者。另一种情况是消费者断开连接,但是获取到的消息没有回馈,则RabbitMQ同样重新分配。如果将该参数设置为true,则RabbimtMQ会为下一个AMQP请求添加一个ack属性,告诉AMQP服务器需要等待回馈。否者,不要等待回馈。大多数时候,你也许想要自己手工发送回馈,例如,需要在回馈之前将消息存入数据库。回馈通常是通过调用 channel.basicAck(deliveryTag, multiple)方法。
以上就是Comsumer的相关代码。
不过没有人发送消息的话,要消费者何用?所以需要一个Productor。消息投递的大概过程是:
- 客户端连接到消息队列,创建一个channel.
- 声明exchange
- 声明queue
- 绑定exchange和queue
- 投递消息到exchange
下面代码表示如果将一个简单的消息发送到名为“vino”的exchange,并且标记为路由键“hello”
// 创建消息通道
Channel channel = connection.createChannel(); /**
* 声明Exchange
* Exchange.DeclareOk exchangeDeclare(String exchange, String
* type, boolean durable, boolean autoDelete, Map<String, Object>
* argumen s) throws IOException;
*/
channel.exchangeDeclare("vino", "direct", true, false, null);
/**
* Declaring a queue is idempotent - it will only be created if it
* doesn't exist already. The message content is a byte array, so you
* can encode whatever you like there.
*/
channel.queueDeclare("vinoQueue", false, false, false, null);
// 绑定exchange和消息队列 Queue.BindOk queueBind(String queue, String exchange,
// String routingKey) throws IOException;
// 注意绑定支持一个queue绑定多个routingKey,或者一个routingKey绑定到多个queue
queueBind("vinoQueue", "vino", "hello");
// 发布消息
String message = "Hello Wrold " + Math.random();
// 第一个参数是exchange的名称,若用""表示发送到默认的exchange,rabbitmq的默认的exchange的类型是direct。
channel.basicPublish("vino", "hello", null, message.getBytes());
剩下就是最后一件事(生产者和消费者都需要调用的)
channel使用完毕后要关闭
channel.close();
conn.close();
参考:兔子和兔子窝
rabbitmq用于分布式系统的更多相关文章
- RabbitMQ在分布式系统中的应用
怎么保证可靠性的? RabbitMQ提供了几种特性,牺牲了一点性能代价,提供了可靠性的保证. 持久化当RabbitMQ退出时,默认会将消息和队列都清除,所以需要在第一次声明队列和发送消息时指定其持久化 ...
- RabbitMQ.Client API (.NET)中文文档
主要的名称空间,接口和类 核心API中定义接口和类 RabbitMQ.Client 名称空间: 1 using RabbitMQ.Client; 核心API接口和类 IModel :表示一个AMQP ...
- rabbitmq 基本信息
两个或多个系统间需要通过定时任务来同步数据,异构系弘的不同进程间想互调用 通讯的问题,可以用rabbitmq解决.rabbitmq擅长解决多系统 异构系统音的数据交换,也可以用于系统间服务的相互调用R ...
- RabbitMQ基础理解
RabbitMQ基本理解 MQ是消息中间件,常见的有RabbitMQ,Kafka,RocketMQ,activeMQ 等,用于分布式系统中.作用有三点 解耦 异步 削峰 RabbitMQ 整体上是一个 ...
- 消息队列MQ面试专题(rabbitmq)
正文: 1.什么是 rabbitmq 采用 AMQP 高级消息队列协议的一种消息队列技术,最大的特点就是消费并不需要确保提供方存在,实现了服务之间的高度解耦 2.为什么要使用 rabbitmq 在分布 ...
- RabbitMQ入门到进阶(Spring整合RabbitMQ&SpringBoot整合RabbitMQ)
1.MQ简介 MQ 全称为 Message Queue,是在消息的传输过程中保存消息的容器.多用于分布式系统 之间进行通信. 2.为什么要用 MQ 1.流量消峰 没使用MQ 使用了MQ 2.应用解耦 ...
- SkyWalking分布式系统应用程序性能监控工具-上
概述 微服务系统监控三要素 现在系统基本都是微服务架构,对于复杂微服务链路调用如下问题如何解决? 一个请求经过了这些服务后其中出现了一个调用失败的问题,如何定位问题发生的地方? 如何计算每个节点访问流 ...
- kafka原理简介并且与RabbitMQ的选择
kafka原理简介并且与RabbitMQ的选择 kafka原理简介,rabbitMQ介绍,大致说一下区别 Kafka是由LinkedIn开发的一个分布式的消息系统,使用Scala编写,它以可水平扩展和 ...
- RabbitMQ如何工作和RabbitMQ核心概念
RabbitMQ是一个开源的消息代理软件.它接受来自生产者的消息并将其传递给消费者.它就像一个中间人,可以用来减少Web应用程序服务器的负载和交付时间. RabbitMQ如何工作 让我们简要介绍一下R ...
随机推荐
- Openjudge-计算概论(A)-能被3,5,7整除的数
描述: 输入一个整数,判断它能否被3,5,7整除,并输出以下信息:1.能同时被3,5,7整除(直接输出3 5 7,每个数中间一个空格):2.能被其中两个数整除(输出两个数,小的在前,大的在后.例如:3 ...
- SharePoint 2013 图文开发系列之列表定义高级篇
转载自 http://www.cnblogs.com/jianyus/p/3484714.html SharePoint列表库,是我们使用过程中最常用的库,下面,我们简单介绍下代码定义自定义列表,主 ...
- centos 10字母随机文件病毒清理
病毒表现:网络流量暴满,疯狂地向香港的一个IP发数据,同时在top里面表现为随机的10位字母的进程,看/proc里面的信息,则为ls,cd之类常见的命令,CPU利用率也在top之首.杀死该进程后,会再 ...
- Tennis Championship
Tennis Championship time limit per test 2 seconds memory limit per test 256 megabytes input standard ...
- Vim 配置Markdown
通过vundle工具安装以下插件: vim-markdown 语法高亮 vim-markdown-preview.vim 通过浏览器实时预览(支持同步滚动) -/.vimrc vundle部分添 ...
- 百度地图与融云的“冲突”(APP的.so手机架构目录,与Library的.so的手机架构目录冲突)
在项目引进融云的IMkit时,总是报百度地图的错误,最开始以为是65535的错误,然后试着去改下百度地图,错误原因是在IMKit里面,它的.so库有这么几个目录 而我的app的libs里面的百度地图的 ...
- System.Uri类 - 获取Url的各种属性,文件名,参数,域名,端口等等
System.Uri类用于处理Uri地址信息,常用到它的地方有,相对Uri地址转绝对Uri地址,获取Uri的某部分信息等等,可以说是一个非常有用的类. 一.属性 AbsolutePath 获取 URI ...
- implement a system call in minix
http://www.papervisions.com/implementing-system-call-in-minix-os/
- java 利用SMB读取远程文件
package com.yss.test.FileReadWriter; import java.io.BufferedInputStream; import java.io.BufferedO ...
- caffe卷积输入通道如何到输出通道
今天一个同学问 卷积过程好像是对 一个通道的图像进行卷积, 比如10个卷积核,得到10个feature map, 那么输入图像为RGB三个通道呢,输出就为 30个feature map 吗, 答案肯定 ...