RabbitMQ（pika模块）

大亮头 2024-10-20 18:59:42 原文

RabbitMQ

基础

安装配置epel源

$ rpm -ivh http://dl.fedoraproject.org/pub/epel/6/i386/epel-release-6-8.noarch.rpm

安装erlang

$ yum -y install erlang

安装RabbitMQ

$ yum -y install rabbitmq-server

systemctl start/stop rabbitmq

pip install pika

or

easy_install pika

or

源码

https://pypi.python.org/pypi/pika

API基础操作

先来看看使用RabbitMQ之前，怎么实现消息队列：利用Queue和Thread，每线程往内存里的队列里put一个数，另一个程序再去内存队列里取数。

import Queue

import threading

message = Queue.Queue(10)

def producer(i):

while True:

message.put(i)

def consumer(i):

while True:

msg = message.get()

for i in range(12):

t = threading.Thread(target=producer, args=(i,))

t.start()

for i in range(10):

t = threading.Thread(target=consumer, args=(i,))

t.start()

import pika

# ######################### 生产者 #########################

connection = pika.BlockingConnection(pika.ConnectionParameters(host='192.168.136.8'))

channel = connection.channel()


2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18



import pika
 
# ########################## 消费者 ##########################
 
connection = pika.BlockingConnection(pika.ConnectionParameters(host='192.168.136.8'))
channel = connection.channel()
 
channel.queue_declare(queue='hello')    #声明，队列名称，和producer创建的重复没有关系
 
def callback(ch, method, properties, body):
    print(" [x] Received %r" % body)
 
channel.basic_consume(callback,         

2



[root@localhost ~]# netstat -ntp |grep beam
tcp6       0      0 192.168.136.8:5672      192.168.136.1:52587     ESTABLISHED 1146/beam


2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22



import pika
#no-ack
########################### 消费者 ##########################
connection = pika.BlockingConnection(pika.ConnectionParameters(host='192.168.136.8'))
channel = connection.channel()
 
channel.queue_declare(queue='hello')
 
def callback(ch, method, properties, body):
    print(" [x] Received %r" % body)
    import time
    time.sleep(10)
    print 'ok'
    ch.basic_ack(delivery_tag = method.delivery_tag)    #主动发送ack
    #打印‘ok’后才告诉MQ，这个消息已经处理完了。
 
channel.basic_consume(callback,
                      queue='hello',
                      no_ack=False)     #自动应答关闭，与channel.basic_ack共同使用
 
print(' [*] Waiting for messages. To exit press CTRL+C')
channel.start_consuming()







2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18



import pika
 
#durable
########################## 生产者 #########################
 
connection = pika.BlockingConnection(pika.ConnectionParameters(host='192.168.136.8'))
channel = connection.channel()
 
channel.queue_declare(queue='hello', durable=True)  #开启持久化
 
channel.basic_publish(exchange='',
                      routing_key='hello',
                      body='Hello World!',
                      properties=pika.BasicProperties(
                          delivery_mode=2, # make message persistent
                      ))
print(" [x] Sent 'Hello World!'")
connection.close()











1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24



import pika
#durable
########################## 消费者 #########################
 
connection = pika.BlockingConnection(pika.ConnectionParameters(host='192.168.136.8'))
channel = connection.channel()
 
# make message persistent
channel.queue_declare(queue='hello', durable=True)
 
 
def callback(ch, method, properties, body):
    print(" [x] Received %r" % body)
    import time
    time.sleep(10)
    print 'ok'
    ch.basic_ack(delivery_tag = method.delivery_tag)
 
channel.basic_consume(callback,
                      queue='hello',
                      no_ack=False)
 
print(' [*] Waiting for messages. To exit press CTRL+C')
channel.start_consuming()







消息获取顺序

2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24



import pika
 
connection = pika.BlockingConnection(pika.ConnectionParameters(host='10.211.55.4'))
channel = connection.channel()
 
# make message persistent
channel.queue_declare(queue='hello')
 
 
def callback(ch, method, properties, body):
    print(" [x] Received %r" % body)
    import time
    time.sleep(10)
    print 'ok'
    ch.basic_ack(delivery_tag = method.delivery_tag)
 
channel.basic_qos(prefetch_count=1)    

2
3
4
5
6
7
8
9
10
11
12
13
14
15



# ######################### 发布者 #########################
import pika
import sys
 
connection = pika.BlockingConnection(pika.ConnectionParameters(host='192.168.136.8'))
channel = connection.channel()
 
channel.exchange_declare(exchange='fanout_name',type='fanout')
 
message = ' '.join(sys.argv[1:]) or "info: Hello World!"
channel.basic_publish(exchange='

2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24



# ########################## 订阅者1 ##########################
 
import pika
 
connection = pika.BlockingConnection(pika.ConnectionParameters(host='192.168.136.8'))
channel = connection.channel()
 
channel.exchange_declare(exchange='

2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19



# ######################### 生产者 #########################
#关键字发送
import pika
import sys
 
connection = pika.BlockingConnection(pika.ConnectionParameters(
        host='192.168.136.8'))
channel = connection.channel()
 
channel.exchange_declare(exchange='direct_logs',
                         type='direct')
 
 
message = 'Hello World!'
channel.basic_publish(exchange='direct_logs',
                      routing_key="yes", #"yes","no","db"
                      body=message)
print(" [x] Sent %r" % (message))
connection.close()






模拟两个消费者，一个消费者的队列是（"yes","db"），另一个消费者队列（"no","db"）。如果生产者发送的队列关键字是"yes"or"no"，其一匹配；如果生产者发送的队列关键字是"db"，则两个消费者都能接收到。









1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31



########################### 消费者1 ##########################
import pika
import sys
  
connection = pika.BlockingConnection(pika.ConnectionParameters(
        host='192.168.136.8'))
channel = connection.channel()
  
channel.exchange_declare(exchange='direct_logs',
                         type='direct')
  
result = channel.queue_declare(exclusive=True)
queue_name = result.method.queue
 
channel.queue_bind(exchange='direct_logs',
                       queue=queue_name,
                       routing_key='yes')
channel.queue_bind(exchange='direct_logs',
                       queue=queue_name,
                       routing_key='db')
  
print(' [*] Waiting for logs. To exit press CTRL+C')
  
def callback(ch, method, properties, body):
    print(" [x] %r:%r" % (method.routing_key, body))
  
channel.basic_consume(callback,
                      queue=queue_name,
                      no_ack=True)
  
channel.start_consuming()












1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31



########################### 消费者2 ##########################
import pika
import sys
  
connection = pika.BlockingConnection(pika.ConnectionParameters(
        host='192.168.136.8'))
channel = connection.channel()
  
channel.exchange_declare(exchange='direct_logs',
                         type='direct')
  
result = channel.queue_declare(exclusive=True)
queue_name = result.method.queue
 
channel.queue_bind(exchange='direct_logs',
                       queue=queue_name,
                       routing_key='no')
channel.queue_bind(exchange='direct_logs',
                       queue=queue_name,
                       routing_key='db')
  
print(' [*] Waiting for logs. To exit press CTRL+C')
  
def callback(ch, method, properties, body):
    print(" [x] %r:%r" % (method.routing_key, body))
  
channel.basic_consume(callback,
                      queue=queue_name,
                      no_ack=True)
  
channel.start_consuming()






2、模糊匹配
exchange type = topic
在topic类型下，可以让队列绑定几个模糊的关键字，之后发送者将数据发送到exchange，exchange将传入”路由值“和 ”关键字“进行匹配，匹配成功，则将数据发送到指定队列。
# 表示可以匹配

2
3



发送者路由值              队列中
python.topic.cn          python.*  -- 不匹配
python.topic.cn          python.#  -- 匹配











1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18



# ######################### 生产者 #########################
#模糊匹配
import pika
import sys
 
connection = pika.BlockingConnection(pika.ConnectionParameters(
        host='192.168.136.8'))
channel = connection.channel()
 
channel.exchange_declare(exchange='topic_logs',
                         type='topic')
 
message = 'Hello World!'
channel.basic_publish(exchange='topic_logs',
                      routing_key="python.topic",
                      body=message)
print(" [x] Sent %r" % (message))
connection.close()






消费者1是‘*’匹配，消费者2是‘#’匹配：





1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28



########################### 消费者1 ##########################
import pika
import sys
 
connection = pika.BlockingConnection(pika.ConnectionParameters(
        host='192.168.136.8'))
channel = connection.channel()
 
channel.exchange_declare(exchange='topic_logs',
                         type='topic')
 
result = channel.queue_declare(exclusive=True)
queue_name = result.method.queue
 
channel.queue_bind(exchange='topic_logs',
                       queue=queue_name,
                       routing_key='python.*')     

2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28



########################### 消费者2 ##########################
import pika
import sys
 
connection = pika.BlockingConnection(pika.ConnectionParameters(
        host='192.168.136.8'))
channel = connection.channel()
 
channel.exchange_declare(exchange='topic_logs',
                         type='topic')
 
result = channel.queue_declare(exclusive=True)
queue_name = result.method.queue
 
channel.queue_bind(exchange='topic_logs',
                       queue=queue_name,
                       routing_key='python.#')    #匹配python.后所有单词
 
print(' [*] Waiting for topic_logs. To exit press CTRL+C')
 
def callback(ch, method, properties, body):
    print(" [x] %r:%r" % (method.routing_key, body))
 
channel.basic_consume(callback,
                      queue=queue_name,
                      no_ack=True)
 
channel.start_consuming()






从结果得出结论，如果生产者发送的routing_key是：
python.topic.cn    -->    只有消费者2能接收到
python.cn            -->    消费者1和消费者2都能接收到
python.                -->    消费者1和消费者2都能接收到
python                 -->    只有消费者2能接收到
网络搜索的概念：
Topic Exchange – 主题式交换器，通过消息的路由关键字和绑定关键字的模式匹配，将消息路由到被绑定的队列中。
这种路由器类型可以被用来支持经典的发布/订阅消息传输模型——使用主题名字空间作为消息寻址模式，将消息传递给那些部分或者全部匹配主题模式的多个消费者。
主题交换器类型的工作方式如下： 绑定关键字用零个或多个标记构成，每一个标记之间用“.”字符分隔。
绑定关键字必须用这种形式明确说明，并支持通配符：“*”匹配一个词组，“#”零个或多个词组。
因此绑定关键字“*.stock.#”匹配路由关键字“usd.stock”和“eur.stock.db”，但是不匹配“stock.nasdaq”
参考来源：http://www.cnblogs.com/wupeiqi/
来自为知笔记(Wiz)
												

											RabbitMQ（pika模块）的更多相关文章	

						RabbitMQ/pika模块
		简介 MessageQueue用于解决跨进程.跨线程.跨应用.跨网络的通信问题. RabbitMQ使用erlang开发,在windows上使用时要先安装erlang. 官方的示例比较容易理解,可以点这 ...
		
						python的pika模块操作rabbitmq
		上一篇博文rabbitmq的构架和原理,了解了rabbitmq的使用原理,接下来使用python的pika模块实现使用rabbitmq. 环境搭建 安装python,不会的请参考Linux安装配置py ...
		
						关于python中pika模块的问题
		工作中经常用到rabbitmq,而用的语言主要是python,所以也就经常会用到python中的pika模块,但是这个模块的使用,也给我带了很多问题,这里整理一下关于这个模块我在使用过程的改变历程已经 ...
		
						rabbitmq pika connection closed
		You are here: Home / rabbitmq pika connection closed rabbitmq pika connection closed By lijiejie on  ...
		
						springboot jpa 创建数据库以及rabbitMQ分模块扫描问题
		在使用jpa过程中,如果没有在配置中加入自动创建实体对于的sql,则需要提前创建建表语句 spring.jpa.properties.hibernate.show_sql=true spring.jp ...
		
								RabbitMQ之pika模块
		发布/订阅 系统 send.py import pika import time s_conn = pika.BlockingConnection(pika.ConnectionParameters( ...
		
						RabbitMQ  python模块pika生产者消费者轮询模型。
		完整代码如下: 生产者,producer import pika connection = pika.BlockingConnection( pika.ConnectionParameters('lo ...
		
						python安装pika模块rabbitmq
		1.pip install pika 2.如找不到 拷贝 D:\python\testmq\venv\Lib\site-packages  \pika目录
		
						rabbitmq pika（python）订阅发布多客户端消费场景简单使用
		发布端: import pika import time credentials = pika.credentials.PlainCredentials('root', 'root',erase_on ...
		
		
	

随机推荐	

									TCP/IP网络协议攻击
			kali视频学习请看 http://www.cnblogs.com/lidong20179210/p/8909569.html 这部分涉及: ARP缓存欺骗攻击 ICMP重定向攻击 SYN FLOOD ...
			
						shh整合后web.xml、spring配置文件和struts.xml的内容
			1:web.xml <?xml version="1.0" encoding="UTF-8"?> <web-app version=" ...
			
						Robot Framework接口测试（3）--http请求之post
			http请求更多的是post请求,我们可以:查看说明:很多网站在登录的时候需要加上头部信息即headers,这个信息可以通过抓包工具获得——fiddler,一个轻量级的抓包工具,大神用了都说好~这里模 ...
			
						[Luogu4390][BOI2007]Mokia 摩基亚
			luogu 题意 支持平面内单点加一个值以及矩阵求和. 平面大小\(W\le2*10^6\),修改操作\(\le1.6*10^5\),查询操作\(\le10^4\) sol \(CDQ\)写一发. 把 ...
			
						【spring源码学习】Spring的IOC容器之BeanPostProcessor接口学习
			一:含义作用 ==>BeanPostProcessor接口是众多Spring提供给开发者的bean生命周期内自定义逻辑拓展接口中的一个 二:接口定义 package org.springfram ...
			
						QtAV的编译方法
			1--编译准备 QtAV的安装编译总指导说明:https://github.com/wang-bin/QtAV/wiki/Build-QtAV QtAV的源代码:https://github.com/ ...
			
						Python学习系列（二）(基础知识)
			Python基础语法 Python学习系列(一)(基础入门) 对于任何一门语言的学习,学语法是最枯燥无味的,但又不得不学,基础概念较繁琐,本文将不多涉及概念解释,用例子进行相关解析,适当与C语言对比, ...
			
						洛谷 1291 [SHOI2002]百事世界杯之旅
			题目:https://www.luogu.org/problemnew/show/P1291 大水题!套路!模板! 稍微注意一下输出就行了. #include<iostream> #inc ...
			
						ubuntu下使用code::blocks编译运行一个简单的gtk+2.0项目
			在具体的操作之前,首先需要安装一些必要的软件.ubuntu下默认安装了gcc,不过缺少必要的Header file,可以在命令行中输入下面的指令安装build-essential套件:sudo apt ...
			
						java分割函数split的用法（二）
			package com.b; public class Sysetm { public static void main(String[] args) { String a=new String(&q ...
			
						
							
					

					
					
															

						 
				
				
	

				
			
	热门专题
		
											
					jeecg批量删除菜单				
								
					android 圆盘				
								
					Nginx 全局 配置				
								
					python类型 map				
								
					idea运行时提示未指定模块				
								
					sql中通配符_和_%				
								
					shell脚本杀掉所有tomcat进程				
								
					visual studio pdb不加载				
								
					android 水平 progressbar 曲线				
								
					js md5加密并后台JAVA解密				
								
					在django中使用markdown				
								
					oracle简述用户和角色的关系				
								
					虚函数后面加 override				
								
					sourceforge加速器				
								
					通过asm 获取对象上的属性的get方法集合				
								
					one switch 官网				
								
					OnCommand中notifycode=0007				
								
					matlab特殊符号对照表				
								
					cad批量导入测量点 插件				
								
					python 行变量				
									
	
		





	
		
			
			
				Home
				
				
					Powered By WordPress