消息队列概念

消息队列技术是分布式应用间交换信息的一种技术。消息队列可以驻留在内存或者磁盘上,队列存储消息直到它们被应用程序读走。通过消息队列,应用程序可以独立的执行,它们不需要知道彼此的位置,或者在继续执行前不需要等待接受程序接收此消息。

消息队列相关的概念有:

  1. 消息(Message)
    消息是MQ中最小的概念,本质上就是一段数据,它能被一个或者多个应用程序所理解,是应用程序之间传递的信息载体。
  2. 队列(Queue)
    1. 本地队列

      本地队列按照功能可划分为初始化队列,传输队列,目标队列和死信队列。

      初始化队列用作消息触发功能。

      传输队列只是暂存待传的消息,条件许可的情况下,通过管道将消息传送到其他的队列管理器。

      目标队列是消息的目的地,可以长期存放消息。

      如果消息不能送达目标队列,也不能再路由出去,则被自动放入死信队列保存。

    2. 别名队列&远程队列
      用来指定远端队列管理器的队列。使用了远程队列,程序就不需要知道目标队列的位置。
    3. 模型队列
      模型队列定义了一套本地队列的属性结合,一旦打开模型队列,队列管理器会按照这些属性动态地创建出一个本地队列。
  3. 队列管理器(Queue Manager)
    队列管理器是一个负责向应用程序提供消息服务的机构,如果把队列管理器比作数据库,那么队列就是其中一张表。
  4. 通道(Channel)
    通道是两个管理器之间的一种单向点对点的的通信连接,如果需要双向交流,可以建立一对通道。

消息队列的主要特点是松耦合。尤其是分布式环境下的应用程序,如果需要进行数据的交换,需要结合主机间和主机内部进程间的通信知识,编写大量的代码,和应用程序本身紧紧耦合在一起,此外,还要面对应用所在的不同环境的差异。而有了消息队列中间件,分布式环境下的数据传输和交换工作就完全移交给了消息队列中间件,并让他来确保数据传输的可靠性,此外还提供独有的异步传输机制,便于和异步事务处理的应用整合。

消息队列的特点有:

  1. 可靠传输:消息中间件确保不同环境下数据传输不丢失
  2. 不重复传输:断点续传
  3. 异步传输:发送和接收方不必同时在线
  4. 消息驱动:主动通知消息给接收方
  5. 支持事务

消息队列适用的场景有:

  1. 消息通道:客户端和服务器端建立一条通道,完成数据的可靠交互
  2. 消息总线:通过服务总线将不同服务串联起来,完成不同服务间的数据传输
  3. 消息路由:根据指定的规则将不同的消息路由到不同的队列中去
  4. 发布订阅:消息发布者向一个Topic发送一条消息后,所有的订阅者都会接收到它

ZeroMQ

ZeroMQ(ZMQ)号称史上最快中间件。它对socket通信进行了封装,使得我们不需要写一行socket函数调用就能完成复杂的网络通信。和一般意义上的消息队列产品不同的是,它没有消息队列服务器,而更像是一个网络通信库。使用它能够轻松的完成多个node之间的传输。

ZMQ有三个基本通信模型:

  1. 请求应答(Request-Reply): client端发起请求,server端响应请求
  2. 发布订阅(Publisher-Subscriber):发布者发布指定主题的消息,订阅端订阅感兴趣的主题
  3. Parallel Pipeline: 消息经过分发到各个节点,处理之后再进行汇总

参考资料:

【MQ消息队列】:http://blog.csdn.net/wxyfighting/article/details/8866437

【ZeroMQ的学习和研究】:http://www.searchtb.com/2012/08/zeromq-primer.html

【ZMQ官网】:http://zeromq.org

消息队列ZeroMQ的更多相关文章

  1. zeromq的安装,部署(号称最快的消息队列,消息中间件)

    1:Storm作为一个实时处理的框架,产生的消息需要快速的进行处理,比如存在消息队列ZeroMQ里面. 由于消息队列ZeroMQ是C++写的,而我们的程序是运行在JVM虚拟机里面的.所以需要jzmq这 ...

  2. 消息队列性能对比——ActiveMQ、RabbitMQ与ZeroMQ(译文)

    Dissecting Message Queues 概述: 我花了一些时间解剖各种库执行分布式消息.在这个分析中,我看了几个不同的方面,包括API特性,易于部署和维护,以及性能质量..消息队列已经被分 ...

  3. 消息队列RabbitMq、ActiveMq、ZeroMq、kafka之间的比较

    MQ框架非常之多,比较流行的有RabbitMq.ActiveMq.ZeroMq.kafka.这几种MQ到底应该选择哪个?要根据自己项目的业务场景和需求.下面我列出这些MQ之间的对比数据和资料. 第一部 ...

  4. 消息队列&Celery&RabbitMQ&zeromq

    一.消息队列 什么是消息队列? “消息队列”是在消息的传输过程中保存消息的容器. “消息”是在两台计算机间传送的数据单位.消息可以非常简单,例如只包含文本字符串:也可以更复杂,可能包含嵌入对象. 消息 ...

  5. 消息队列库——ZeroMQ

    消息队列库——ZeroMQ ZeroMQ(简称ZMQ)是一个基于消息队列的多线程网络库,其对套接字类型.连接处理.帧.甚至路由的底层细节进行抽象,提供跨越多种传输协议的套接字. ZMQ是网络通信中新的 ...

  6. 关于消息队列的使用----ActiveMQ,RabbitMQ,ZeroMQ,Kafka,MetaMQ,RocketMQ

    一.消息队列概述消息队列中间件是分布式系统中重要的组件,主要解决应用解耦,异步消息,流量削锋等问题,实现高性能,高可用,可伸缩和最终一致性架构.目前使用较多的消息队列有ActiveMQ,RabbitM ...

  7. RabbitMQ,Apache的ActiveMQ,阿里RocketMQ,Kafka,ZeroMQ,MetaMQ,Redis也可实现消息队列,RabbitMQ的应用场景以及基本原理介绍,RabbitMQ基础知识详解,RabbitMQ布曙

    消息队列及常见消息队列介绍 2017-10-10 09:35操作系统/客户端/人脸识别 一.消息队列(MQ)概述 消息队列(Message Queue),是分布式系统中重要的组件,其通用的使用场景可以 ...

  8. Netty构建分布式消息队列(AvatarMQ)设计指南之架构篇

    目前业界流行的分布式消息队列系统(或者可以叫做消息中间件)种类繁多,比如,基于Erlang的RabbitMQ.基于Java的ActiveMQ/Apache Kafka.基于C/C++的ZeroMQ等等 ...

  9. Redis 做消息队列

    一般来说,消息队列有两种场景,一种是发布者订阅者模式,一种是生产者消费者模式.利用redis这两种场景的消息队列都能够实现.定义: 生产者消费者模式:生产者生产消息放到队列里,多个消费者同时监听队列, ...

随机推荐

  1. jetty8 中的异常 There is an error in invoking javac. A full JDK (not just JRE) is required...

    在jetty文件夹下的start.ini文件里有这么一行"-Dorg.apache.jasper.compiler.disablejsr199=true"注释,把这个注释去掉,再启 ...

  2. 记开发个人图书收藏清单小程序开发(三)DB设计

    主要是参考豆瓣的图书查询接口: https://api.douban.com/v2/book/isbn/:9780132350884 返回内容如下: { "rating": { & ...

  3. Oracle诊断工具 - ORA-2730x Troubleshooting Tool

    通常情况下,ORA-27300 ORA-27301 ORA-27302错误的原因是操作系统的系统调用错误或者操作系统配置问题,错误格式:ORA-27300: OS system dependent o ...

  4. Go语言-windows安装配置篇

    Go-windows安装配置 前言 学习完了python基础,顺便也要提前学习一下go啦,抱着这样的心情,今晚尝试了安装一下go,很顺利的完成了,没有难度. 需要了解更多的关于Go的基本信息可以去维基 ...

  5. git遇到问题

    简介 这里记录git使用过程中所涉及的问题,记录下解决方案. git 本地项目上传远程仓库[github] 已在远程建好仓库,在本地项目根目录下 $ git init $ git add . $ gi ...

  6. KInect AR沙盒制作的一点小经验

    最近在微博上看到这样一条 微博  >点这看< 看起来非常有意思,就去Google了一下如何制作. 没想到这是一个开源项目,而且还告诉你如何安装 OK,接下来就说说我的制作过程. 首先,先放 ...

  7. SIM900A模块HTTP相关调试笔记

    SIM900A模块使用笔记 更新2018-12-8 正常工作状态: 接线方法: 首先将 AT 写入字符串输入框,然后点击 发送.因为模块波特率默认是 9600,所以两条指令的显示都是没有问题的:如果将 ...

  8. 函数的应用 "注册" and "登录"

    登录 自己写 # 注册 registdef regist(): f = open("account", mode="r+", encoding="ut ...

  9. HDU1407 测试你是否和LTC水平一样高

    题目大意:给出一个num,计算方程x^2+y^2+z^2 = num的第一个正整数解(字典序),0 < num <= 10000. 方法参考了网上的博客,自己打了一波,发现还有很多不懂的地 ...

  10. 两周以来的学习成果&遇到的问题及解决:

    1.学习java的基本内容,看慕课网上的java入门三季,与韩顺平老师的java视频 刚开始是看韩顺平老师的视频,边看边实战,内容很细,也很快熟练,但是进度太慢.后来就先看了慕课网上的java 入门的 ...