首页
Python
Java
IOS
Andorid
NodeJS
JavaScript
HTML5
【
[b0041] python 归纳 (二六)_多进程数据共享和同步_事件Event
】的更多相关文章
[b0037] python 归纳 (二二)_多进程数据共享和同步_管道Pipe
# -*- coding: utf-8 -*- """ 多进程数据共享 管道Pipe 逻辑: 2个进程,各自发送数据到管道,对方从管道中取到数据 总结: 1.只适合两个进程 2.recv 会阻塞 3.其中一个进程结束了,管道还在,另外一个进程还能使用 4.可以把管道认为一个队列, 发送数据端,往队列写数据 接收数据端,从队列读数据,队列空了阻塞 单向管道 1个队列,双向管道 2个队列 使用: 1. 创建2个管道的两端的对象 pipe_left_conn,pipe_right_…
[b0036] python 归纳 (二一)_多进程数据共享和同步_服务进程Manager
# -*- coding: utf-8 -*- """ 多进程数据共享 服务器进程 multiprocessing.Manager 入门使用 逻辑: 20个子线程修改共享数据 总结: 1. Mangeer类似 Value,Array 2. 里面内容比较多,这只是入门用法 3. 还可以操作共享自定义对象,本例是基本数据结构 简单使用: 1. 创建多进程管理的 基本数据结构 list1 = manager.list([1,2,3,4,5]) dict1 = manager.dic…
[b0035] python 归纳 (二十)_多进程数据共享和同步_共享内存Value & Array
1. Code # -*- coding: utf-8 -*- """ 多进程 数据共享 共享变量 Value,Array 逻辑: 2个进程,对同一份数据,一个做加法,一个做加法,各做10次 总结: 1.入口代码 必须放在 if __name__ == '__main__' 下,不然报错,不清楚为什么 用法: 1. 创建共享变量 o = Value('i',1000) or o = Array('i',list) 指定不同的类型 2. 启动子进程通过 o.value or o…
[b0041] python 归纳 (二六)_多进程数据共享和同步_事件Event
# -*- coding: utf-8 -*- """ 多进程 同步 事件multiprocessing.Event 逻辑: 子线程负责打印,会阻塞, 等待主进程发出控制信号 以便继续 总结: 个人理解, multiprocessing.Event 中维护了一个boolean变量,初始值为Fasle e.wait() 如果为Fasle会阻塞,True继续执行 , set() 将值设置为True clear() 将值设置为False is_set() 查看 不确定是否支持多个子…
[b0040] python 归纳 (二五)_多进程数据共享和同步_信号量Semaphore
# -*- coding: utf-8 -*- """ 多进程同步 使用信号量 multiprocessing.Semaphore 逻辑: 启动5个进程,打印,每个各自睡眠2秒 竞争2个锁大小的信号量,任何时候只有2个进程在执行打印 总结: 1.通过信号 实现了Pool的效果,任何时候最多只有2个进程在执行指定代码段 2.相当于创建了锁的数组,一次创建多把锁,绑定同一个名字 3.与RLock 有细微区别 RLock 同一个进程可以锁多次 Semaphore 多个不同进程可以同…
[b0039] python 归纳 (二四)_多进程数据共享和同步_锁Lock&RLock
# -*- coding: utf-8 -*- """ 多进程 锁使用 逻辑: 10个进程各种睡眠2秒,然后打印. 不加锁同时打印出来,总共2秒,加锁一个接一个打印,总共20秒 总结: 1.Lock 只要1把锁,RLock 有多把锁,但是不清楚什么场景只适合用RLock 使用: 1. 创建所 lock = Lock() or lock = RLock() 2. 把锁当做参数传入给子进程 3. 在子进程执行代码中对代码块,加锁 lock.acquire(); 其他代码 lock…
[b0038] python 归纳 (二三)_多进程数据共享和同步_队列Queue
1 队列读写 # -*- coding: utf-8 -*- """ 多进程 共享 队列 multiprocessing.Process 逻辑: 一个进程往队列写数据,一个进程从读写读数据 写进程完了后,主进程强行结束读进程 使用: 1. 创建队列 q = multiprocessing.Queue() ,默认无限大小,可以指定大小 2. 把队列 q 当参数传给 子进程 执行代码, 猜测应该不能通过全局变量的方式访问 3. 在子进程中读写队列数据 q.put(<dat…
[b0031] python 归纳 (十六)_线程同步_锁
# -*- coding: utf-8 -*- """ 学习 多线程同步 使用锁 threading.Lock() 逻辑: 2 个线程,操作同一个整型变量,一个加法,另外一个减法 总结: 1. 锁不是加在共享数据上,不像数据库锁加在数据上 ,好像是锁定修改数据的程序代码,任何时候,锁定的代码 最多被一个线程执行 2. 某段操作共享数据的代码加锁了,如果共享数据在代码其他地方有修改逻辑,没加锁 数据逻辑性无法保证 3. 锁获得,释放之间的代码可以不操作共享数据 ,仅仅实现线程之…
[b0016] python 归纳 (二)_静态方法和类方法
# -*- coding: UTF-8 -*- """ 测试 类的静态方法,类方法 @staticmethod @classmethod 总结: 1. self 指向类对象, cls 指向类,两个名字都可以随意取,一般取大家公认的这个两个 2. staticmethod 方法体可以调用 同类的 类.类属性. 类.静态方法.类.类方法 类外可以调用 类.静态方法 3. classmethod 方法体可以条用 同类的 cls.类属性.cls.静态方法.cls.类方法 当然也可以通…
Python爬虫进阶六之多进程的用法
前言 在上一节中介绍了thread多线程库.python中的多线程其实并不是真正的多线程,并不能做到充分利用多核CPU资源. 如果想要充分利用,在python中大部分情况需要使用多进程,那么这个包就叫做 multiprocessing. 借助它,可以轻松完成从单进程到并发执行的转换.multiprocessing支持子进程.通信和共享数据.执行不同形式的同步,提供了Process.Queue.Pipe.Lock等组件. 那么本节要介绍的内容有: ProcessLockSemaphoreQueue…