Python -- queue队列模块

一 简单使用 --内置模块哦

import Queue
myqueue = Queue.Queue(maxsize = 10)
　　Queue.Queue类即是一个队列的同步实现。队列长度可为无限或者有限。可通过Queue的构造函数的可选参数maxsize来设定队列长度。如果maxsize小于1就表示队列长度无限。
将一个值放入队列中
myqueue.put(10)
　　　　调用队列对象的put()方法在队尾插入一个项目。put()有两个参数，第一个item为必需的，为插入项目的值；第二个block为可选参数，默认为1。如果队列当前为空且block为1，put()方法就使调用线程暂停,直到空出一个数据单元。如果block为0，put方法将引发Full异常。

将一个值从队列中取出
myqueue.get()

调用队列对象的get()方法从队头删除并返回一个项目。可选参数为block，默认为True。如果队列为空且block为True，get()就使调用线程暂停，直至有项目可用。如果队列为空且block为False，队列将引发Empty异常。

python queue模块有三种队列:
1、python queue模块的FIFO队列先进先出。
2、LIFO类似于堆。即先进后出。
3、还有一种是优先级队列级别越低越先出来。

针对这三种队列分别有三个构造函数:
1、class Queue.Queue(maxsize) FIFO 
2、class Queue.LifoQueue(maxsize) LIFO 
3、class Queue.PriorityQueue(maxsize) 优先级队列

介绍一下此包中的常用方法:

二、API介绍

该模块包含以下函数:

1.Queue.qsize()

该函数返回消息队列的当前空间。

2.Queue.empty()

该函数判断消息队列是否为空,返回True或False。

3.Queue.full()

该函数判断消息队列是否满,返回True或False。 Queue.full 与 maxsize 大小对应

4.Queue.put(item, block=True, timeout=None)

该函数用来消息队列中存放消息。block参数可以控制是否阻塞,timeout指定阻塞的等待时间。如果不阻塞或者超时,会引起一个full exception。

5.Queue.put_nowait(item)

该函数相当于put(item, False)。

6.Queue.get(block=True, timeout=None) 

该函数用于获取消息,其他同put相同。 Queue.get_nowait() 相当Queue.get(False)

7.Queue.task_done()

该函数接受消息的线程通过调用这个函数来说明消息对应的任务已完成。

8.Queue.join()

该函数调用线程阻塞直到所有消息对应的任务已经完成。

 1 import Queue  
 2 import threading  
 3 import time  
 4 import random  
 5   
 6 q = Queue.Queue(0) #当有多个线程共享一个东西的时候就可以用它了  
 7 NUM_WORKERS = 3  
 8   
 9 class MyThread(threading.Thread):  
10   
11     def __init__(self,input,worktype):  
12        self._jobq = input  
13        self._work_type = worktype  
14        threading.Thread.__init__(self)  
15   
16     def run(self):  
17        while True:  
18            if self._jobq.qsize() > 0:  
19                self._process_job(self._jobq.get(),self._work_type)  
20            else:break  
21   
22     def _process_job(self, job, worktype):  
23        doJob(job,worktype)  
24   
25 def doJob(job, worktype):  
26    time.sleep(random.random() * 3)  
27     print"doing",job," worktype ",worktype  
28   
29 if __name__ == '__main__':  
30     print "begin...."  
31     for i inrange(NUM_WORKERS * 2):  
32        q.put(i) #放入到任务队列中去  
33     print "job qsize:",q.qsize()  
34   
35     for x inrange(NUM_WORKERS):  
36        MyThread(q,x).start()  

一些需要注意的地方：

1. 阻塞模式

import Queue

q = Queue.Queue(10)

......
       for i in range(10):
               q.put('A')
               time.sleep(0.5)

这是一段极其简单的代码（另有两个线程也在操作队列q），我期望每隔0.5秒写一个'A'到队列中，但总是不能如愿：间隔时间有时会远远超过0.5秒。原来，Queue.put（）默认有 block = True 和 timeou 两个参数。当  block = True 时，写入是阻塞式的，阻塞时间由 timeou  确定。当队列q被（其他线程）写满后，这段代码就会阻塞，直至其他线程取走数据。Queue.put（）方法加上 block=False 的参数，即可解决这个隐蔽的问题。但要注意，非阻塞方式写队列，当队列满时会抛出 exception Queue.Full 的异常。

2. 无法捕获 exception Queue.Empty 的异常

while True:
                ......
                try:
                        data = q.get()
                except Queue.Empty:
                        break

我的本意是用队列为空时，退出循环，但实际运行起来，却陷入了死循环。这个问题和上面有点类似：Queue.get（）默认的也是阻塞方式读取数据，队列为空时，不会抛出 except Queue.Empty ，而是进入阻塞直至超时。 加上block=False 的参数，问题迎刃而解。

https://www.cnblogs.com/shiluoliming/p/6428222.html