RabbitMQ基本示例,轮询机制,no_ack作用
一、RabbitMQ简介:
'''
RabbitMQ就是消息队列
之前不是学了Queue了吗,都是队列还学RabbitMQ干嘛?
干的事情是一样的
Python的Queue有两个,
一个线程Queue生产者消费者模型,一个进程Queue用于父进程与子进程交互
两个完全独立的Python程序就不能交互了,或者两台机器之间的Queue,Java跟Python之间不能交互了
所以有了RabbitMQ QQ跟Word通信:
1、用socket直接通信
2、通过硬盘通信
3、QQ通过socket发给中间商,中间商通过socket发给Word
第1个和第3个有啥区别呢?
第一种直接通信比较复杂,
第二种中间商可以省去网络通信维护的工作,而且可以实现三方或者更多方的通信
这个中间商就叫RabbitMQ
Python语言连接RabbitMQ的模块有:
pika主流常用、 celery分布式消息队列
'''
二、简单的示例:
import pika # 相当于建立最基本的socket
connection = pika.BlockingConnection(pika.ConnectionParameters('localhost'))
# 声明一个管道
channel = connection.channel()
# 在管道里声明一个队列
channel.queue_declare(queue='q1')
# 通过管道发消息
channel.basic_publish(exchange='',
routing_key='q1', # 队列名
body='Hello World') # 消息内容
print("send: Hello World")
connection.close()
producer生产者
import pika '''
消费者可能在其他机器上跨机器是没问题的
'''
# 建立连接.
connection = pika.BlockingConnection(pika.ConnectionParameters('localhost'))
# 建立管道
channel = connection.channel()
# 声明队列,为什么还要声明队列?
# 如果是生产者先运行,可以不写这个。
# 由于不确定生产者先运行还是消费者先运行,所以写上这个,随便哪个先运行都不会报错。
channel.queue_declare(queue='q1') def callback(ch, method, properties, body):
# ch:管道内存对象地址,method:获取前面发的routing_key或处理成功应答delivery_tag,properties:可以获取持久化模式delivery_mode
print("-->", ch, method, properties)
print("received:{0}".format(body))
# 开始消费消息
channel.basic_consume(callback, # 如果收到消息就调用该函数处理消息
queue='q1',
no_ack=True)
print("Waiting for messages...")
# 开始收消息了。启动就一直运行,一直收下去,没有就阻塞住
channel.start_consuming()
consumer消费者
运行结果:先启动消费者,再启动生产者(多个生产者,一个消费者)
'''
消费者控制台(启动时):
Waiting for messages...
生产者控制台(第一次运行):
send: Hello World
消费者控制台(变化1):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
生产者控制台(第二次运行):
send: Hello World
消费者控制台(变化2):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
'''
三、消息分发轮询:
上面的示例第二种运行结果:先启动消费者,再启动生产者(多个生产者,多个消费者)
'''
消费者控制台(启动消费者1):
Waiting for messages...
消费者控制台(启动消费者2):
Waiting for messages...
消费者控制台(启动消费者3):
Waiting for messages...
生产者控制台(第一次运行):
send: Hello World
消费者1控制台(变化):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
生产者控制台(第二次运行):
send: Hello World
消费者2控制台(变化):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
生产者控制台(第三次运行):
send: Hello World
消费者3控制台(变化):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
生产者控制台(第四次运行):
send: Hello World
消费者1控制台(变化):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
轮询分发...
'''
四、特殊情况,no_ack作用:
'''
假如现在顺序启动了3个消费者(A,B,C)处理数据,
A在处理的过程中挂掉了,怎么办呢?有两种方式:
一、no_ack设置为True:
这种情况表示生产者不关心数据是否处理完毕。如果A挂了
A当时的数据就丢掉了没有被处理
二、no_ack不写:
这种情况下,如果A挂了,A的数据会转给B, 如果B挂了,A的数据会
转给C,如果C也挂了,那么在下次启动消费者时会转给第一次启动的消费者
这种情况下,消费者处理完毕会通知RabbitMQ,RabbitMQ就从队列里删除
该数据。只有收到通知才从队列中删除。
'''
consumer: 改以下两处就会将所有消息完全处理
def callback(ch, method, properties, body):
print("--->:",ch)
time.sleep(10)
print("received: ", body)
# 2、加上这句,通知给RabbitMQ说这个消息已经处理完了,可以从队列里删了,如果no_ack=False这里必须要写
ch.basic_ack(delivery_tag=method.delivery_tag) channel.basic_consume(callback,
queue='q1',
# no_ack=True 1、将这句注释表示消费者处理一条就通知RabbitMQ
)
查看队列里当前消息数量:
RabbitMQ基本示例,轮询机制,no_ack作用的更多相关文章
- RabbitMQ消息分发轮询和Message Acknowledgment
一.消息分发 RabbitMQ中的消息都只能存储在Queue中,生产者(下图中的P)生产消息并最终投递到Queue中,消费者(下图中的C)可以从Queue中获取消息并消费. 多个消费者可以订阅同一个Q ...
- 【python】-- RabbitMQ 安装、基本示例、轮询机制
RabbitMQ MQ全称为Message Queue, 是一种分布式应用程序的的通信方法,它是消费-生产者模型的一个典型的代表,producer往消息队列中不断写入消息,而另一端consumer则可 ...
- 通过 PowerShell 支持 Azure Traffic Manager 外部端点和权重轮询机制
Jonathan TulianiAzure网络 - DNS和 Traffic Manager高级项目经理 在北美 TechEd 大会上,我们宣布了 Azure Traffic Manager将支持 ...
- RabbitMQ消息分发轮询
一,前言 如果我们一个生产者,对应多个消费者,rabbitmq 会发生什么呢 二,消息分发轮询 前提条件:1个生产者 ----> 多个消费者,且no_ack=True (启动三次生产者) ① ...
- kafka Poll轮询机制与消费者组的重平衡分区策略剖析
注意本文采用最新版本进行Kafka的内核原理剖析,新版本每一个Consumer通过独立的线程,来管理多个Socket连接,即同时与多个broker通信实现消息的并行读取.这就是新版的技术革新.类似于L ...
- 12.nodejs事件轮询机制
一:nodejs事件轮询机制 就是 函数的执行顺序 <script type="text/javascript"> setImmediate(function(){ ...
- nginx基本配置与参数说明以及Nginx中的upstream轮询机制介绍
转自:http://blog.csdn.net/happydream_c/article/details/54943802 一.nginx简介 Nginx (发音为[engine x])专为性能优化而 ...
- OSChinaclient源代码学习(3)--轮询机制的实现
主要以OSChina Androidclient源代码中Notice的轮询机制进行解读. 一.基础知识 一般IM(即使通讯)的实现有两种方式:推送和轮询,推送就是server主动向client发送消息 ...
- 面试题: nodejs 的事件轮询机制
setTimeout(function(){ console.log('setTimeout()执行了') },0) setImmediate(function(){ console.log('set ...
随机推荐
- Vim 复制粘帖格式错乱问题的解决办法
有时候,复制文本(尤其是代码)到 Vim,会出现格式错乱的问题.看样子,应该是自动缩进惹得祸.本文不去深究原因,直接给出解决方法. 1. paste 模式 运行如下命令,进入 paste 模式: :s ...
- 从零开始学习PYTHON3讲义(一)认识Python
课程名称 从零开始PYTHON3 课程长度 15讲 适用年龄 15-20岁(初三-大一) 本讲名称 认识Python 时长 90分钟 教学内容分析 Python是时下最流行的计算机编程语言之一.本课程 ...
- SpringBoot入门教程(十九)@ControllerAdvice+@ExceptionHandler全局捕获Controller异常
在spring 3.2中,新增了@ControllerAdvice 注解,可以用于定义@ExceptionHandler.@InitBinder.@ModelAttribute,并应用到所有@Requ ...
- EF三种编程方式图文详解
Entity Framework4.1之前EF支持“Database First”和“Model First”编程方式,从EF4.1开始EF开始支持支持“Code First”编程方式,今天简单看一下 ...
- nginx普通配置/负载均衡配置/ssl/https配置
1.nginx普通配置 server { listen ; server_name jqlin.lynch.com; access_log /var/log/nginx/main.log main; ...
- 网络协议抓包分析——TCP传输控制协议(连接建立、释放)
前言 TCP协议为数据提供可靠的端到端的传输,处理数据的顺序和错误恢复,保证数据能够到达其应到达的地方.TCP协议是面向连接的,在两台主机使用TCP协议进行通信之前,会先建立一个TCP连接(三次握手) ...
- SmoOne——开源免费的企业移动OA应用,基于.Net
一.SmoOne是什么一个开源的移动OA应用 二.语言C# 三.开发环境Visual Studio 四.开发平台Smobiler Designer 五.功能该应用开源代码中包含注册.登录.用户信息等基 ...
- C# string数组转int数组(转载)
C# string数组转int数组 用法 1 2 3 4 5 6 7 8 9 10 11 12 13 14 //字符串数组(源数组) string[] sNums = new[] {"1 ...
- [LeetCode] 1. Two Sum 两数之和
Part 1. 题目描述 (easy) Given an array of integers, return indices of the two numbers such that they add ...
- 快速傅里叶变换(FFT)详解
本文只讨论FFT在信息学奥赛中的应用 文中内容均为个人理解,如有错误请指出,不胜感激 前言 先解释几个比较容易混淆的缩写吧 DFT:离散傅里叶变换—>$O(n^2)$计算多项式乘法 FFT:快速 ...