1. 一、Process
  2. 参数介绍:
  3. 1 group参数未使用,值始终为None
  4. 2 target表示调用对象,即子进程要执行的任务
  5. 3 args表示调用对象的位置参数元组,args=(1,2,'a',)
  6. 4 kwargs表示调用对象的字典,kwargs={'name':'a','age':18}
  7. 5 name为子进程的名称
  8.  
  9. 方法介绍:
  10. 1 p.start():启动进程,并调用该子进程中的p.run()
  11. 2 p.run():进程启动时运行的方法,正是它去调用target指定的函数,我们自定义类的类中一定要实现该方法
  12. 3 p.terminate():强制终止进程p,不会进行任何清理操作,如果p创建了子进程,该子进程就成了僵尸进程,使用该方法需要特别小心这种情况。如果p还保存了一个锁那么也将不会被释放,进而导致死锁
  13. 4 p.is_alive():如果p仍然运行,返回True
  14. 5 p.join([timeout]):主线程等待p终止(强调:是主线程处于等的状态,而p是处于运行的状态)。timeout是可选的超时时间,需要强调的是,p.join只能joinstart开启的进程,而不能joinrun开启的进程
  15.  
  16. 属性介绍:
  17. 1 p.daemon:默认值为False,如果设为True,代表p为后台运行的守护进程,当p的父进程终止时,p也随之终止,并且设定为True后,p不能创建自己的新进程,必须在p.start()之前设置
  18. 2 p.name:进程的名称
  19. 3 p.pid:进程的pid
  20. 4 p.exitcode:进程在运行时为None、如果为–N,表示被信号N结束(了解即可)
  21. 5 p.authkey:进程的身份验证键,默认是由os.urandom()随机生成的32字符的字符串。这个键的用途是为涉及网络连接的底层进程间通信提供安全性,这类连接只有在具有相同的身份验证键时才能成功(了解即可)
  22.  
  23. 1join:父进程等待子进程结束后才开始执行自己的代码
  24. # 发送一封邮件
  25. import time
  26. import random
  27. from multiprocessing import Process
  28.  
  29. def func():
  30. time.sleep(random.randint(1,3)) # 模拟邮件发送的延迟
  31. print('邮件已发送')
  32.  
  33. if __name__ == '__main__':
  34. p = Process(target=func)
  35. p.start()
  36. p.join() # 阻塞 直到进程p执行完毕后才结束阻塞
  37. print('邮件发送完毕')
  38.  
  39. # 发送十封邮件
  40. import time
  41. import random
  42. from multiprocessing import Process
  43.  
  44. def func(index):
  45. time.sleep(random.randint(1,3))
  46. print('第%s封邮件发送完毕' %index)
  47.  
  48. if __name__ == '__main__':
  49. p_lst = []
  50. for i in range(10):
  51. p = Process(target=func,args=(i,))
  52. p.start() # 先让所有子进程都启动
  53. p_lst.append(p)
  54. for p in p_lst: # 再进行join阻塞
  55. p.join()
  56. print('10封邮件全部发送完毕')
  57.  
  58. 2、用类的方式开启进程
  59. 我们之前创建进程的时候,其实也是在创建一个Process类的对象,再调用对象的start方法开启进程,
  60. 那么我们也可以自己定义一个类来实现进程的创建:
  61.  
  62. import os
  63. from multiprocessing import Process
  64.  
  65. class MyProcess(Process): # 定义一个类,继承Process类
  66. def run(self): # 必须实现的方法,是启动进程的方法
  67. print('子进程:',os.getpid(),os.getppid())
  68.  
  69. if __name__ == '__main__':
  70. p = MyProcess() # 实例化
  71. p.start() # 自动调用run方法
  72. print('父进程:',os.getpid())
  73.  
  74. 给自定义类传参:
  75. 首先看看Process源码

  76. import time
  77. import os
  78. from multiprocessing import Process
  79.  
  80. class MyProcess(Process):
  81. def __init__(self,i):
  82. super().__init__() # 实现父类的初始化方法
  83. self.index = i # 定义自己的属性(参数)
  84.  
  85. def run(self):
  86. time.sleep(1)
  87. print('子进程:',self.index,os.getpid(),os.getppid())
  88.  
  89. if __name__ == '__main__':
  90. p_lst = []
  91. for i in range(10):
  92. p = MyProcess(i)
  93. p.start()
  94. p_lst.append(p)
  95. for p in p_lst:
  96. p.join()
  97. print('主进程:',os.getpid())
  98.  
  99. 3、守护进程
  100. 主进程创建守护进程
  101. 1:守护进程会在主进程代码执行结束后就终止
  102. 2:守护进程内无法再开启子进程,否则抛出异常:AssertionError: daemonic processes are not allowed to have children
  103. 注意:进程之间是互相独立的,主进程代码运行结束,守护进程随即终止
  104.  
  105. 1,守护进程会在主进程代码执行结束后就终止
  106. import time
  107. from multiprocessing import Process
  108.  
  109. def func():
  110. print('子进程 start')
  111. time.sleep(3) # 睡3秒的时候主进程的代码已经执行完毕了,所以子进程也会跟着结束
  112. print('子进程end')
  113.  
  114. if __name__ == '__main__':
  115. p = Process(target=func)
  116. p.daemon = True # daemon是Process的属性
  117. p.start()
  118. time.sleep(2) # 睡2秒的时候,执行了子进程
  119. print('主进程')
  120. 结果:
  121. 子进程 start
  122. 主进程
  123.  
  124. 2,守护进程会在主进程代码执行结束后就终止 ,但是父进程会等待子进程结束才正式结束。
  125. 注意:代码结束是指代码运行到了最后一行,并不代表进程已经结束了。
  126. import time
  127. from multiprocessing import Process
  128. def func():
  129. count = 1
  130. while True:
  131. print('*' * count)
  132. time.sleep(1)
  133. count += 1
  134.  
  135. def func2():
  136. print('普通进程开始')
  137. time.sleep(5)
  138. print('普通进程结束')
  139.  
  140. if __name__ == '__main__':
  141. p1 = Process(target=func)
  142. p1.daemon = True
  143. p1.start()
  144.  
  145. Process(target=func2).start()
  146. time.sleep(3)
  147. print('主进程')
  148.  
  149. 结果:
  150. *
  151. 普通进程开始
  152. **
  153. ***
  154. 主进程
  155. 普通进程结束
  156.  
  157. 3,守护进程的作用
  158. 守护进程可以报活,就是向某个服务报告自己还活着
  159.  
  160. 场景:
  161. 例如你写好了一个网页,你的服务端是不应该停的,因为你服务端一旦停止了,别人就无法访问你的网页了,所以我们应该确保服务端没有‘死’,
  162. 这个时候就可以使用守护进程,在你的服务端起一个守护进程,让这个进程只做一件事,就是每隔1个小时(时间按照自己的合理安排设定)向某一台机器汇报自己还活着,
  163. 一旦这个机器没有收到你守护进程传来的消息,那么就可以认为你的服务端已经挂了。
  164.  
  165. 例如:
  166. import time
  167. from multiprocessing import Process
  168. def Guard():
  169. while True:
  170. time.sleep(3600)
  171. print('我还活着') # 向某个机器汇报我还活着,具体该怎么写汇报的逻辑就怎么写,这里只是示范
  172.  
  173. if __name__ == '__main__':
  174. p = Process(target=Guard)
  175. p.daemon = True
  176. p.start()
  177. # 主进程的逻辑(主进程应该是一直运行的,不应该有代码结束的时候)
  178. print('主进程')
  179.  
  180. 4terminate:关闭进程
  181. import time
  182. from multiprocessing import Process
  183. def fun():
  184. print('子进程')
  185.  
  186. if __name__ == '__main__':
  187. p = Process(target=fun)
  188. p.start()
  189. p.terminate() # 关闭进程,不会立即关闭,所以is_alive立刻查看的结果可能还是存活
  190. print(p.is_alive()) # True
  191. time.sleep(0.1)
  192. print(p.is_alive()) # False
  193.  
  194. 二、锁 Lock
  195. 1、异步的问题
  196. 我们都知道异步进程的好处就是可以一起执行,效率高,但是当多个进程使用同一份数据资源的时候,就会引发数据安全或顺序混乱问题。
  197.  
  198. 抢票系统:
  199. #文件ticket的内容为:{"count":3}
  200. #注意一定要用双引号,不然json无法识别
  201. #并发运行,效率高,但竞争写同一文件,数据写入错乱
  202.  
  203. import time
  204. import json
  205. from multiprocessing import Process
  206. def search(person):
  207. with open('ticket') as f:
  208. ticketinfo = json.load(f)
  209. print('%s查询余票:' %person,ticketinfo['count'])
  210.  
  211. def get_ticket(person):
  212. with open('ticket') as f:
  213. ticketinfo = json.load(f)
  214. time.sleep(0.2) #模拟读数据的网络延迟
  215. if ticketinfo['count'] > 0:
  216. print('%s买到票了'%person)
  217. ticketinfo['count'] -= 1
  218. time.sleep(0.2)
  219. with open('ticket','w') as f:
  220. json.dump(ticketinfo,f)
  221. else:
  222. print('%s没买到票'%person)
  223.  
  224. def ticket(person):
  225. search(person)
  226. get_ticket(person)
  227.  
  228. if __name__ == '__main__':
  229. for i in range(5):
  230. p = Process(target=ticket,args=('person%s'%i,))
  231. p.start()
  232. 结果:
  233. person0查询余票: 3
  234. person4查询余票: 3
  235. person1查询余票: 3
  236. person2查询余票: 3
  237. person3查询余票: 3
  238. person0买到票了
  239. person4买到票了
  240. person1买到票了
  241. person2买到票了
  242. person3买到票了
  243.  
  244. 分析:票只有三张,但是5个人都显示买到了,这是因为5个进程异步进行,大家都同一时间在对一个文件进行修改,导致的混乱。
  245.  
  246. 2、用锁解决:
  247. # 加锁降低了程序的效率,让原来能够同时执行的代码变成顺序执行了,异步变同步的过程
  248. # 保证了数据的安全
  249.  
  250. import time
  251. import json
  252. from multiprocessing import Process
  253. from multiprocessing import Lock # 导入Lock类
  254. def search(person):
  255. with open('ticket') as f:
  256. ticketinfo = json.load(f)
  257. print('%s查询余票:' %person,ticketinfo['count'])
  258.  
  259. def get_ticket(person):
  260. with open('ticket') as f:
  261. ticketinfo = json.load(f)
  262. time.sleep(0.2) #模拟读数据的网络延迟
  263. if ticketinfo['count'] > 0:
  264. print('%s买到票了'%person)
  265. ticketinfo['count'] -= 1
  266. time.sleep(0.2)
  267. with open('ticket','w') as f:
  268. json.dump(ticketinfo,f)
  269. else:
  270. print('%s没买到票'%person)
  271.  
  272. def ticket(person,lock):
  273. search(person)
  274. lock.acquire() # 谁获得钥匙 谁才能进入
  275. get_ticket(person)
  276. lock.release() # 用完了,把钥匙给下一个人
  277. if __name__ == '__main__':
  278. lock = Lock() # 创建一个锁对象
  279. for i in range(5):
  280. p = Process(target=ticket,args=('person%s'%i,lock))
  281. p.start()
  282.  
  283. 结果:
  284. person1查询余票: 3
  285. person3查询余票: 3
  286. person0查询余票: 3
  287. person2查询余票: 3
  288. person4查询余票: 3
  289. person1买到票了
  290. person3买到票了
  291. person0买到票了
  292. person2没买到票
  293. person4没买到票
  294.  
  295. 三、信号量 Semaphore
  296. 1、信号量的实现机制:计数器 + 锁实现的
  297. 信号量同步基于内部计数器,每调用一次acquire(),计数器减1;每调用一次release(),计数器加1.当计数器为0时,acquire()调用被阻塞。
  298. 互斥锁同时只允许一个线程更改数据,而信号量Semaphore是同时允许一定数量的线程更改数据(Samphore相当于有几把钥匙,lock只能有一把钥匙)
  299.  
  300. import time
  301. import random
  302. from multiprocessing import Process
  303. from multiprocessing import Semaphore
  304.  
  305. def changba(person,sem): # 在唱吧 唱歌
  306. sem.acquire() # 第一次可以同时进来两个人
  307. print('%s走进唱吧' %person)
  308. time.sleep(random.randint(3,6)) # 每个人唱歌的时间
  309. print('%s走出唱吧' % person) # 唱完走人
  310. sem.release() # 把钥匙给下一个人
  311.  
  312. if __name__ == '__main__':
  313. sem = Semaphore(2) # 2把钥匙
  314. for i in range(5):
  315. p = Process(target=changba,args=('person%s' %i,sem))
  316. p.start()
  317.  
  318. 四、事件 Event
  319. python线程的事件用于主线程控制其他线程的执行,事件主要提供了三个方法 setwaitclear
  320. 事件处理的机制:全局定义了一个“Flag”,如果“Flag”值为 False,那么当程序执行 event.wait 方法时就会阻塞,如果“Flag”值为True,那么event.wait 方法时便不再阻塞。
  321.  
  322. 阻塞事件 wait()方法
  323. wait是否阻塞是看event对象内部的Flag
  324.  
  325. 控制Flag的值:
  326. set() Flag的值改成True
  327. clear() Flag的值改成False
  328. is_set() 判断当前的Flag的值
  329.  
  330. 红绿灯:
  331. import time
  332. import random
  333. from multiprocessing import Process
  334. from multiprocessing import Event
  335.  
  336. def traffic_ligth(e): # 红绿灯
  337. print('\033[31m红灯亮\033[0m') # Flag 默认是False
  338. while True:
  339. if e.is_set(): # 如果是绿灯
  340. time.sleep(2) # 2秒后
  341. print('\033[31m红灯亮\033[0m') # 转为红灯
  342. e.clear() # 设置为False
  343.  
  344. else: # 如果是红灯
  345. time.sleep(2) # 2秒后
  346. print('\033[32m绿灯亮\033[0m') # 转为绿灯
  347. e.set() # 设置为True
  348.  
  349. def car(e,i): # 车
  350. if not e.is_set():
  351. print('car %s在等待' %i)
  352. e.wait()
  353. print('car %s 通过了'%i)
  354.  
  355. if __name__ == '__main__':
  356. e = Event()
  357. p = Process(target=traffic_ligth,args=(e,)) # 红绿灯进程
  358. p.daemon = True
  359. p.start()
  360. p_lst = []
  361. for i in range(10): # 10辆车的进程
  362. time.sleep(random.randrange(0,3,2))
  363. p = Process(target=car,args=(e,i))
  364. p.start()
  365. p_lst.append(p)
  366. for p in p_lst:p.join()
  367.  

五、总结
进程之间虽然内存不共享,但是是可以通信的
  Lock Semaphore Event 都在进行进城之间的通信
  只不过这些通信的内容我们不能改变
后续还有队列和管道能让进程之间进行通信

进程Process之join、daemon(守护)、terminate(关闭)的更多相关文章

  1. 进程Process之join、daemon(守护)、terminate(关闭)、multiprocessing之锁、信号量和事件

    一.Process 参数介绍: 1 group参数未使用,值始终为None 2 target表示调用对象,即子进程要执行的任务 3 args表示调用对象的位置参数元组,args=(1,2,'a',) ...

  2. Python之路(第三十七篇)并发编程:进程、multiprocess模块、创建进程方式、join()、守护进程

    一.在python程序中的进程操作 之前已经了解了很多进程相关的理论知识,了解进程是什么应该不再困难了,运行中的程序就是一个进程.所有的进程都是通过它的父进程来创建的.因此,运行起来的python程序 ...

  3. (4)进程---daemon守护线程和join阻塞

    join ()方法:主线程A中,创建了子线程B,并且在主线程A中调用了B.join(),那么,主线程A会在调用的地方等待,直到子线程B完成操作后,才可以接着往下执行,那么在调用这个线程时可以使用被调用 ...

  4. python并发编程02 /多进程、进程的创建、进程PID、join方法、进程对象属性、守护进程

    python并发编程02 /多进程.进程的创建.进程PID.join方法.进程对象属性.守护进程 目录 python并发编程02 /多进程.进程的创建.进程PID.join方法.进程对象属性.守护进程 ...

  5. linux系统编程之进程(八):守护进程详解及创建,daemon()使用

    一,守护进程概述 Linux Daemon(守护进程)是运行在后台的一种特殊进程.它独立于控制终端并且周期性地执行某种任务或等待处理某些发生的事件.它不需要用户输入就能运行而且提供某种服务,不是对整个 ...

  6. PHP7 网络编程(二)daemon守护进程

    前言 在一个多任务的计算机操作系统中,守护进程(英语:daemon,/ˈdiːmən/或/ˈdeɪmən/)是一种在后台执行的计算机程序.此类程序会被以进程的形式初始化.守护进程程序的名称通常以字母“ ...

  7. python中的daemon守护进程实现方法

    原文参考:http://blog.csdn.net/tao_627/article/details/49532021 守护进程是生存期长的一种进程.它们独立于控制终端并且周期性的执行某种任务或等待处理 ...

  8. Daemon——守护进程

    守护进程,也就是通常说的Daemon进程,是Linux中的后台服务进程.它是一个生存期较长的进程,通常独立于控制终端并且周期性地执行某种任务或等待处理某些发生的事件.守护进程常常在系统引导装入时启动, ...

  9. Python并发编程04 /多线程、生产消费者模型、线程进程对比、线程的方法、线程join、守护线程、线程互斥锁

    Python并发编程04 /多线程.生产消费者模型.线程进程对比.线程的方法.线程join.守护线程.线程互斥锁 目录 Python并发编程04 /多线程.生产消费者模型.线程进程对比.线程的方法.线 ...

随机推荐

  1. 演练:创建和注册自定义 HTTP 模块

    本演练演示自定义 HTTP 模块的基本功能. 对于每个请求,都需要调用 HTTP 模块以响应 BeginRequest 和 EndRequest 事件. 因此,该模块在处理请求之前和之后运行. 如果 ...

  2. Unix系统编程()检查进程的存在

    检查进程的存在 kill系统调用还有另一重功用.若将参数sig指定为0(即所谓空信号),则无信号发送. 相反,kill仅会去执行错误检查,查看是否可以向目标进程发送信号. 从另一角度来看,这意味着,可 ...

  3. C语言 · 完数

    算法训练 完数   时间限制:1.0s   内存限制:512.0MB      问题描述 一个数如果恰好等于它的因子之和,这个数就称为“完数”.例如,6的因子为1.2.3,而6=1+2+3,因此6就是 ...

  4. 面向对象设计原则三:里氏替换原则(LSP)

    里氏替换原则(LSP)定义:在任何父类出现的地方都可以用它的子类类替换,且不影响功能.解释说明:其实LSP是对开闭原则的一个扩展,在OO思想中,我们知道对象是由一系列的状态和行为组成的,里氏替换原则说 ...

  5. crontab中运行python程序出错,提示ImportError: No module named解决全过程

    将一个python脚本放入crontab执行时,提示如下错:ImportError: No module named hashlib但是在shell中直接执行时没有任何问题,google之后,得到线索 ...

  6. centos6.5 系统上升级2.6.6到2.7.12

    因开发需要,今天把CentOS 6.4自带的Python2.6.6升级到了Python2.7.3.按照如下步骤进行升级 1.查看当前系统python的版本 python -V 2.下载2.7.3版本的 ...

  7. 【cf492】E. Vanya and Field(拓展欧几里得)

    http://codeforces.com/contest/492/problem/E 一开始没时间想,,诶真是.. 挺水的一道题.. 将每个点的横坐标都转换成0,然后找纵坐标有多少即可..即解方程 ...

  8. thinkphp nginx pathinfo模式支持

    最近一个项目中使用了ThinkPHP做为开发框架,URL上我们使用了PATHINFO模式,但是Nginx默认是不支持PATHINFO的,需要进行手动配置才可以,于是我们按照了以下方法进行了Nginx的 ...

  9. 剑指 offer set 16 数字在排序数组中出现的次数

    总结 1. Leetcode 上有一道题, 求某一个数字在有序数组中出现的最左位置和最右位置, 而这道题就是那题的变形

  10. jquery 判断ul下是否存在li

    $("ul").has("li").length > 0;$("ul > li").length > 0;$(" ...