孤荷凌寒自学python第四十三天python 的线程同步之Queue对象
(完整学习过程屏幕记录视频地址在文末,手写笔记在文末)
Queue对象是直接操作队列池的对象,队列中可以存放多种对象,当然也就可以存放线程对象,将多个线程对象存放于队列池中之后,就能非常显式的操作各个线程,非常方便。这是今天学习Queue的皮毛之后的感受,第一次感觉对线程有了非常完全的掌控,不像最初学习Lock与RLock那样,那时感觉完全没有掌控住线程。
一、 引用queue模块
Queue来自于模块queue
注意queue模块的首字母是小写的;而类名称Queue的名称首字母是大写的。
因此使用前必须 声明引用queue模块:
import queue
二、 得到queue模块中的三个相关队列类的对象实体(测试代码统一在后测试)
在queue模块中其实有三个与队列相关的类
1
Queue
新的Queue对象=queue. Queue([maxsize])
Queue是指一个 先进先出 的队列,即先进入队列 的对象,取出时也先被取出来。
缩写为:Fifo (First in first out)
2
LifoQueue
新的LifoQueue对象=queue. LifoQueue([maxsize])
LifoQueue是指一个 后进先出 的队列,即后进入队列 的对象,取出时却会被先取出来。
缩写为:Lifo (Last in first out)
3
PriorityQueue
新的PriorityQueue对象=queue. PriorityQueue ([maxsize])
PriorityQueue是指一个 优先级 队列,即不管进入队列 的顺序如何,取出时都按对象标注的 优先级来安排 取出顺序,优先级数字小的对象会被优先取出来 。
由于初学乍到,没有深入学习PriorityQueue,发现它的用法较前两个对象是不同的。
【maxsize】可选形参如果指定 了大于0的实际参数,那么就表示指定了这个队列对象的 最大容量(就是说可以容下多少个对象)。如果没有指定这个形参的实参或指定的实参小于1,那么都表示这个队列的容量是无限大的。
三、 Queue对象的主要方法(测试代码统一在后测试)
1
Queue对象 . put(对象[,block=True[,timeout=0]])
此方法用于将一个对象放入队列中,其中可选形参block=True,说明默认值是True,此时表示放入队列是阻塞式的,阻塞线程的时间由timeout决定。
关于阻塞式放入,我目前的理解是,如果 队列 的最大容量已经满了,但也要等待队列中有空位时才将对象放入。这种情况下不会报错,因为在阻塞下等待队列中有空位发生,就马上放进去。不过如果指定有timeout时间,则时间用完就不再阻塞以等待了。
如果 block=False,那么一旦队列中没有空位以将对象放入队列中,那么,就直接报错。
2
Queue对象 . get([,block=True[,timeout=0]])
此方法将取出队列中当前按优先顺序应当被取出来 的下一个对象,将返回一个对象。
其中可选形参block=True,说明默认值是True,此时表示取出队列中的元素是阻塞式的,阻塞线程的时间由timeout决定。
关于阻塞式取出,我目前的理解是,如果 队列 中已经没有对象了(队列为空),但也要等待队列中有对象时才继续取出。这种情况下不会报错,因为在阻塞下等待队列中有对象发生,就马上取出来。不过如果 指定有timeout时间,则时间用完就不再阻塞以等待了。
如果 block=False,那么一旦队列中已经没有对象供取出,那么,就直接报错。
3
Queue对象 . qsize()
得到队列中当前的对象个数。
4
Queue对象 . maxsize()
得到队列中当前定义时设定的最大容量个数。
5
Queue对象 . empty()
此方法将返回队列是否已经为空,将返回一个布尔对象。
6
Queue对象 . not_empty()
此方法将返回队列是否不是空的,将返回一个布尔对象。
7
Queue对象 . full()
此方法将返回队列是否已经装满,将返回一个布尔对象。
8
Queue对象 . join()
执行此方法将等待队列中所有元素都被取出,队列为空时才执行后续操作。
四、 将文件由两个线程反复同步写和读的实现由Queue队列来实现
代码如下:
importthreading
import queue
fromdatetime import datetime
from time import sleep
strf='1.txt'
def read(n):
with open(strf,'r',encoding='utf-8') as f:
lstA=f.readlines()
print('读取第' + str(n) + '次' + str(lstA) + '\n')
def write(n):
with open(strf,'w',encoding='utf-8') as f:
lstA=['写入','第' + str(n) + '次']
f.writelines(lstA)
#sleep(1)
print(str(lstA) +'\n')
def main():
q=queue.Queue(20)
x=range(10)
for n in x:
tread=threading.Thread(target=read,args=(n,))
twrite=threading.Thread(target=write,args=(n,))
q.put(twrite)
q.put(tread)
x=range(20)
for n in x:
t=q.get()
print('当前队列中还有对象:' + str(q.qsize())+ '个\n')
t.start()
t.join()
#q.join()
print('主线程结束。')
if __name__=='__main__':
main()
运行结果如下:
当前队列中还有对象:19个
['写入', '第0次']
当前队列中还有对象:18个
读取第0次['写入第0次']
当前队列中还有对象:17个
['写入', '第1次']
当前队列中还有对象:16个
读取第1次['写入第1次']
当前队列中还有对象:15个
['写入', '第2次']
当前队列中还有对象:14个
读取第2次['写入第2次']
当前队列中还有对象:13个
['写入', '第3次']
当前队列中还有对象:12个
读取第3次['写入第3次']
当前队列中还有对象:11个
['写入', '第4次']
当前队列中还有对象:10个
读取第4次['写入第4次']
当前队列中还有对象:9个
['写入', '第5次']
当前队列中还有对象:8个
读取第5次['写入第5次']
当前队列中还有对象:7个
['写入', '第6次']
当前队列中还有对象:6个
读取第6次['写入第6次']
当前队列中还有对象:5个
['写入', '第7次']
当前队列中还有对象:4个
读取第7次['写入第7次']
当前队列中还有对象:3个
['写入', '第8次']
当前队列中还有对象:2个
读取第8次['写入第8次']
当前队列中还有对象:1个
['写入', '第9次']
当前队列中还有对象:0个
读取第9次['写入第9次']
主线程结束。
从结果中看出,读写各十次都是成功的,且读写交替进行,符合同步要求,且读写没有冲突。
五、 将文件由两个线程反复同步写和读的实现由LifoQueue队列来实现
代码如下:
importthreading
import queue
fromdatetime import datetime
from time import sleep
strf='1.txt'
def read(n):
with open(strf,'r',encoding='utf-8') as f:
lstA=f.readlines()
print('读取第' + str(n) + '次' + str(lstA) + '\n')
def write(n):
with open(strf,'w',encoding='utf-8') as f:
lstA=['写入','第' + str(n) + '次']
f.writelines(lstA)
#sleep(1)
print(str(lstA) +'\n')
def main():
x=range(10)
q=queue.LifoQueue(20)
for n in x :
tread=threading.Thread(target=read,args=(n,))
twrite=threading.Thread(target=write,args=(n,))
q.put(tread)
q.put(twrite)
x=range(q.maxsize)
for n in x:
t=q.get()
t.start()
t.join()
print('主线程结束。')
if __name__=='__main__':
main()
运行结果:
['写入', '第9次']
读取第9次['写入第9次']
['写入', '第8次']
读取第8次['写入第8次']
['写入', '第7次']
读取第7次['写入第7次']
['写入', '第6次']
读取第6次['写入第6次']
['写入', '第5次']
读取第5次['写入第5次']
['写入', '第4次']
读取第4次['写入第4次']
['写入', '第3次']
读取第3次['写入第3次']
['写入', '第2次']
读取第2次['写入第2次']
['写入', '第1次']
读取第1次['写入第1次']
['写入', '第0次']
读取第0次['写入第0次']
主线程结束。
——————————
今天整理的学习笔记完成,最后例行说明下我的自学思路:
根据过去多年我自学各种编程语言的经历,认为只有真正体验式,解决实际问题式的学习才会有真正的效果,即让学习实际发生。在2004年的时候我开始在一个乡村小学自学电脑 并学习vb6编程语言,没有学习同伴,也没有高师在上,甚至电脑都是孤岛(乡村那时还没有网络),有的只是一本旧书,在痛苦的自学摸索中,我找到适应自己零基础的学习方法:首先是每读书的一小节就作相应的手写笔记,第二步就是上机测试每一个笔记内容是否实现,其中会发现书中讲的其实有出入或错误,第三步就是在上机测试之后,将笔记改为电子版,形成最终的修订好的正确无误的学习笔记。
通过反复尝试错误,在那个没有分享与交流的黑暗时期我摸黑学会了VB6,尔后接触了其它语言,也曾听过付费视频课程,结果发现也许自己学历果然太低,就算是零基础的入门课程,其实也难以跟上进度,讲师的教学多数出现对初学者的实际情况并不了解的情况,况且学习者的个体也存在差异呢?当然更可怕的是收费课程的价格往往是自己难以承受的。
于是我的所有编程学习都改为了自学,继续自己的三步学习笔记法的学习之路。
当然自学的最大问题是会走那么多的弯路,没有导师直接输入式的教学来得直接,好在网络给我们带来无限搜索的机会,大家在网络上的学习日志带给我们共享交流的机会,而QQ群等交流平台、网络社区的成立,我们可以一起自学,互相批评交流,也可以获得更有效,更自主的自学成果。
于是我以人生已过半的年龄,决定继续我的编程自学之路,开始学习python,只希望与大家共同交流,一个人的独行是可怕的,只有一群人的共同前进才是有希望的。
诚挚期待您的交流分享批评指点!欢迎联系我加入从零开始的自学联盟。
这个时代互联网成为了一种基础设施的存在,于是本来在孤独学习之路上的我们变得不再孤独,因为网络就是一个新的客厅,我们时刻都可以进行沙龙活动。
非常乐意能与大家一起交流自己自学心得和发现,更希望大家能够对我学习过程中的错误给予指点——是的,这样我就能有许多免费的高师了——这也是分享时代,社区时代带来的好福利,我相信大家会的,是吧!
根据完全共享的精神,开源互助的理念,我的个人自学录制过程是全部按4K高清视频录制的,从手写笔记到验证手写笔记的上机操作过程全程录制,但因为4K高清文件太大均超过5G以上,所以无法上传至网络,如有需要可联系我QQ578652607对传,乐意分享。上传分享到百度网盘的只是压缩后的720P的视频。
我的学习过程录像百度盘地址分享如下:(清晰度:1280x720)
链接:https://pan.baidu.com/s/19BbmLmhXRgtdSXWMWtmabw
提取码:dy3p
Bilibili:
https://www.bilibili.com/video/av38090801/
喜马拉雅语音笔记:
https://www.ximalaya.com/keji/19103006/146250540
孤荷凌寒自学python第四十三天python 的线程同步之Queue对象的更多相关文章
- 孤荷凌寒自学python第八十四天搭建jTessBoxEditor来训练tesseract模块
孤荷凌寒自学python第八十四天搭建jTessBoxEditor来训练tesseract模块 (完整学习过程屏幕记录视频地址在文末) 由于本身tesseract模块针对普通的验证码图片的识别率并不高 ...
- 孤荷凌寒自学python第七十四天开始写Python的第一个爬虫4
孤荷凌寒自学python第七十四天开始写Python的第一个爬虫4 (完整学习过程屏幕记录视频地址在文末) 今天在上一天的基础上继续完成对我的第一个代码程序的书写. 直接上代码.详细过程见文末屏幕录像 ...
- 孤荷凌寒自学python第六十四天学习mongoDB的基本操作并进行简单封装3
孤荷凌寒自学python第六十四天学习mongoDB的基本操作并进行简单封装3 (完整学习过程屏幕记录视频地址在文末) 今天是学习mongoDB数据库的第十天. 今天继续学习mongoDB的简单操作, ...
- 孤荷凌寒自学python第五十四天使用python来删除Firebase数据库中的文档
孤荷凌寒自学python第五十四天使用python来删除Firebase数据库中的文档 (完整学习过程屏幕记录视频地址在文末) 今天继续研究Firebase数据库,利用google免费提供的这个数据库 ...
- 孤荷凌寒自学python第四十九天继续研究跨不同类型数据库的通用数据表操作函数
孤荷凌寒自学python第四十九天继续研究跨不同类型数据库的通用数据表操作函数 (完整学习过程屏幕记录视频地址在文末,手写笔记在文末) 今天继续建构自感觉用起来顺手些的自定义模块和类的代码. 不同类型 ...
- 孤荷凌寒自学python第四十八天通用同一数据库中复制数据表函数最终完成
孤荷凌寒自学python第四十八天通用同一数据库中复制数据表函数最终完成 (完整学习过程屏幕记录视频地址在文末) 今天继续建构自感觉用起来顺手些的自定义模块和类的代码. 今天经过反复折腾,最终基本上算 ...
- 孤荷凌寒自学python第四十七天通用跨数据库同一数据库中复制数据表函数
孤荷凌寒自学python第四十七天通用跨数据库同一数据库中复制数据表函数 (完整学习过程屏幕记录视频地址在文末) 今天继续建构自感觉用起来顺手些的自定义模块和类的代码. 今天打算完成的是通用的(至少目 ...
- 孤荷凌寒自学python第四十六天开始建构自己用起来更顺手一点的Python模块与类尝试第一天
孤荷凌寒自学python第四十六天开始建构自己用起来更顺手一点的Python模块与类,尝试第一天 (完整学习过程屏幕记录视频地址在文末,手写笔记在文末) 按上一天的规划,这是根据过去我自学其它编程语 ...
- 孤荷凌寒自学python第四十五天Python初学基础基本结束的下阶段预安装准备
孤荷凌寒自学python第四十五天Python初学基础基本结束的下阶段预安装准备 (完整学习过程屏幕记录视频地址在文末,手写笔记在文末) 今天本来应当继续学习Python的数据库操作,但根据过去我自 ...
- 孤荷凌寒自学python第四十四天Python操作 数据库之准备工作
孤荷凌寒自学python第四十四天Python操作数据库之准备工作 (完整学习过程屏幕记录视频地址在文末,手写笔记在文末) 今天非常激动地开始接触Python的数据库操作的学习了,数据库是系统化设计 ...
随机推荐
- PASCAL VOC数据集分析
http://blog.csdn.net/zhangjunbob/article/details/52769381
- 在控制台中 使用memcache
控制台的代码 在memcache 中查询 hans,结果显示如下 :
- HTML第三章:表单
第三章:表单 表单标签form:<form></form>//相当于一张记录用户信息的单子 常用属性:method:表单的提交方式,常用的值有两个 ...
- HTML第一章:初始HTML
设置ws字体大小:左上角file-->Settings--->在搜索框中输入font 网页的第一行一定是<!DOCTYPE html>:网页声明,代表这个页面是h5页面html ...
- JT/T 1077-2016《道路运输车辆卫星定位系统车载视频平台技术要求》平台标准符合性检测合同
合同编号: 道路运输车辆卫星定位系统 平台标准符合性检测合同 委托方(甲方): 受托方(乙方): 交通运输通信信息工程质量检测中心 签订时间: 签订地点: 北京市 委托方(甲方): 委托方(甲方): ...
- BZOJ4198: [Noi2015]荷马史诗(哈夫曼树)
Time Limit: 10 Sec Memory Limit: 512 MBSubmit: 1824 Solved: 983[Submit][Status][Discuss] Descripti ...
- js | javascript实现浏览器窗口大小被改变时触发事件的方法
转载 当浏览器的窗口大小被改变时触发的事件window.onresize 为事件指定代码: 代码如下: window.onresize = function(){ } 例如: 浏览器可见区域信息: 代 ...
- Thinkphp 取消Url默认模块的现实
例子http://www.tp.com/home/index/index 想要现实的效果是:http://www.tp.com/index/index 1是通过配置路由来达到目的 2通过配置首页的入口 ...
- 数据分析处理库Pandas——对象操作
Series结构 索引 修改 旧数据赋值给新数据,旧数据不变. 对某一数值进行修改,可以选择保留修改前或修改后的数值. 替换索引 修改某一个索引 添加 在数据1后添加数据2,数据1不改变. 添加一个数 ...
- 状压DP详解(位运算)
前言: 状压DP是一种非常暴力的做法(有一些可以排除某些状态的除外),例如dp[S][v]中,S可以代表已经访问过的顶点的集合,v可以代表当前所在的顶点为v.S代表的就是一种状态(二进制表示),比如 ...