第十五章、python中的进程操作-开启多进程

一、multprocess模块

multiprocess不是一个模块而是python中一个操作、管理进程的包。 在这个包中几乎包含了和进程有关的所有子模块,将这部分大致分为四个部分:创建进程部分,进程同步部分,进程池部分,进程之间数据共享。

二、multprocess.process模块

Process类中的参数有如下

  1. group=None, target=None, name=None, args=(), kwargs={}
  2. ----------------------------------------------------------
  3. egp = Process(target=foo)#实例化出p子进程对象

强调:

  1. 需要使用关键字的方式来指定参数
  2. args指定的为传给target函数的位置参数,是一个元组形式,必须有逗号

参数介绍:

  • group参数未使用,值始终为None
  • target表示调用对象,即子进程要执行的任务
  • args表示调用对象的位置参数元组,args=(1,2,'egon',)
  • kwargs表示调用对象的字典,kwargs={'name':'egon','age':18}
  • name为子进程的名称

三、Process()对象方法介绍

  • p.start():启动进程,并调用该子进程中的p.run()

  • p.run():进程启动时运行的方法,正是它去调用target指定的函数,我们自定义类的类中一定要实现该方法

  • p.terminate():强制终止进程p,不会进行任何清理操作,如果p创建了子进程,该子进程就成了僵尸进程,使用该方法需要特别小心这种情况。如果p还保存了一个锁那么也将不会被释放,进而导致死锁

  • p.is_alive():如果p仍然运行,返回True

    1. from multiprocessing import Process,current_process
    2. import time
    3. def foo():
    4. print('进程 start')
    5. time.sleep(2)
    6. print('进程 end')
    7. if __name__ == '__main__':
    8. p = Process(target=foo)
    9. p.start()
    10. print(p.is_alive()) # True#打印与子进程同时进行
    11. time.sleep(5)#在五秒内的第三秒进程就已经结束了
    12. print(p.is_alive()) # 代码运行完了就算死了 False
    13. print('主')
  • p.join([timeout]):主线程等待p终止(强调:是主线程处于等的状态,而p是处于运行的状态)。timeout是可选的超时时间,需要强调的是,p.join只能join住start开启的进程,而不能join住run开启的进程

    1. from multiprocessing import Process
    2. import time
    3. def foo():
    4. print('进程 start ')
    5. time.sleep(2.3)
    6. print('进程 end ')
    7. if __name__ == '__main__':
    8. p = Process(target=foo)
    9. p.start() #
    10. # 核心需求就是
    11. # time.sleep(5)
    12. p.join() # 阻塞住主进程再等待子进程结束,然后再往下执行,(了解的是:内部会待用wait())
    13. print('主')

四、Process()对象属性介绍

  • p.daemon:默认值为False,如果设为True,代表p为后台运行的守护进程,当p的父进程终止时,p也随之终止,并且设定为True后,p不能创建自己的新进程,必须在p.start()之前设置
  • p.name:进程的名称
  • p.pid:进程的pid

五、使用process模块创建进程

  1. import time
  2. from multiprocessing import Process
  3. def f(name):
  4. print('hello', name)
  5. print('我是子进程')
  6. if __name__ == '__main__':
  7. p = Process(target=f, args=('bob',))
  8. p.start()
  9. time.sleep(1)
  10. print('执行主进程的内容了'

六、进程之间的数据隔离问题

  1. from multiprocessing import Process
  2. import time
  3. x = 0
  4. def task():
  5. global x
  6. x = 100
  7. print('子进程的x修改为了{}'.format(x))
  8. if __name__ == '__main__':
  9. p = Process(target=task)
  10. p.start()
  11. time.sleep(5)
  12. print(x)

七、守护进程

守护进程会随着主进程的结束而结束。

由主进程创建守护进程

  其一:守护进程会在主进程代码执行结束后就终止

  其二:守护进程内无法再开启子进程,否则抛出异常:AssertionError: daemonic processes are not allowed to have children

  1. from multiprocessing import Process
  2. import time
  3. def foo():
  4. print('守护进程 start')
  5. time.sleep(5)
  6. print('守护进程 end')
  7. p = Process(target=foo)#第三秒的时候主进程结束了没执行到这一步,不报错
  8. p.start()
  9. if __name__ == '__main__':
  10. p = Process(target=foo)
  11. p.daemon =True # 把这个子进程定义为了守护进程,
  12. p.start()
  13. time.sleep(2)#子进程还没有结束,主进程结束了强制子进程提前结束
  14. print('主')
  1. from multiprocessing import Process
  2. import time
  3. def foo():
  4. print('守护进程 start')
  5. time.sleep(2)
  6. print('守护进程 end')
  7. p = Process(target=foo)
  8. p.start()
  9. if __name__ == '__main__':
  10. p = Process(target=foo)
  11. p.daemon =True # 把这个子进程定义为了守护进程
  12. p.start()
  13. time.sleep(3)
  14. print('主')
  15. ------------------------------------------------------
  16. #报错:AssertionError: daemonic processes are not allowed to have children

八、terminate方法

  1. from multiprocessing import Process,current_process
  2. import time
  3. def foo():
  4. print('进程 start')
  5. # print('--------------------- ',current_process().name)
  6. time.sleep(50)
  7. print('进程 end')
  8. if __name__ == '__main__':
  9. p = Process(target=foo)
  10. p.start()
  11. time.sleep(0.45)#startterminate慢大约0.45
  12. p.terminate() # 给操作系统发了一个立即终止请求
  13. print(p.is_alive()) # True
  14. p.join()
  15. print(p.is_alive()) # False
  16. print('主')
  17. -------------------------------------------------
  18. 进程 start
  19. True
  20. False

九、pid和name属性


  1. class Myprocess(Process):
  2. def __init__(self,person):
  3. self.name=person # name属性是Process中的属性,标示进程的名字
  4. super().__init__() # 执行父类的初始化方法会覆盖name属性
  5. # self.name = person # 在这里设置就可以修改进程名字了
  6. # self.person = person # 如果不想覆盖进程名,就修改属性名称就可以了
  7. def run(self):
  8. print('%s正在和网红脸聊天' %self.name)
  9. # print('%s正在和网红脸聊天' %self.person)
  10. time.sleep(random.randrange(1,5))
  11. print('%s正在和网红脸聊天' %self.name)
  12. # print('%s正在和网红脸聊天' %self.person)
  13. p1=Myprocess('哪吒')
  14. p1.start()
  15. print(p1.pid) #可以查看子进程的进程id

第十五章、python中的进程操作-开启多进程的更多相关文章

  1. Python程序中的进程操作--—--开启多进程

    Python程序中的进程操作-----开启多进程 之前我们已经了解了很多进程相关的理论知识,了解进程是什么应该不再困难了,刚刚我们已经了解了,运行中的程序就是一个进程.所有的进程都是通过它的父进程来创 ...

  2. Python程序中的进程操作-开启多进程(multiprocess.process)

    目录 一.multiprocess模块 二.multiprocess.process模块 三.process模块介绍 3.1 方法介绍 3.2 属性介绍 3.3 在windows中使用process模 ...

  3. 第五章 python中的异常处理

    每种编程语言都会有自己的异常处理机制,虽然各有特色,但基本上都差不多,那么python中强大异常处理机制是什么样的呢? 一.异常: python用异常对象来表示异常情况,遇到错误后,会引发异常.如果异 ...

  4. 二十五、python中pickle序列学习(仅python语言中有)

    1.pickle序列介绍:提供4个关键字:dumps,dump,loads,load 语法:f.write(pickle.dumps(dict))=pickle.dump(dict,f) " ...

  5. 第十五章、Python多线程之信号量和GIL

    目录 第十五章.Python多线程之信号量和GIL 1. 信号量(Semaphore) 2. GIL 说明: 第十五章.Python多线程之信号量和GIL 1. 信号量(Semaphore) 信号量用 ...

  6. 第十五章、Python多线程同步锁,死锁和递归锁

    目录 第十五章.Python多线程同步锁,死锁和递归锁 1. 引子: 2.同步锁 3.死锁 引子: 4.递归锁RLock 原理: 不多说,放代码 总结: 5. 大总结 第十五章.Python多线程同步 ...

  7. “全栈2019”Java第九十五章:方法中可以定义静态局部内部类吗?

    难度 初级 学习时间 10分钟 适合人群 零基础 开发语言 Java 开发环境 JDK v11 IntelliJ IDEA v2018.3 文章原文链接 "全栈2019"Java第 ...

  8. “全栈2019”Java第八十五章:实现接口中的嵌套接口

    难度 初级 学习时间 10分钟 适合人群 零基础 开发语言 Java 开发环境 JDK v11 IntelliJ IDEA v2018.3 文章原文链接 "全栈2019"Java第 ...

  9. “全栈2019”Java第二十五章:流程控制语句中循环语句while

    难度 初级 学习时间 10分钟 适合人群 零基础 开发语言 Java 开发环境 JDK v11 IntelliJ IDEA v2018.3 文章原文链接 "全栈2019"Java第 ...

随机推荐

  1. 小D课堂-SpringBoot 2.x微信支付在线教育网站项目实战_2-2.快速搭建SpringBoot项目,采用IDEA

    笔记 2.快速搭建SpringBoot项目,采用IDEA     简介:使用SpringBoot start在线生成项目基本框架并导入到IDEA中 参考资料:         IDEA使用文档    ...

  2. 2018.05.17 nace关于采购订单的配置笔记

    由于公司的打印都是使用nast作为记录表,在给日企中国客户做扩展时单独配置了一下nace的设置 ZM01作为采购订单批量打印的输出类型,ZM02作为采购订单创建变更时输出的pdf打印输出类型 1.TC ...

  3. JavaScript抽象语法树英文对照

    type:"Program" //顶级对象类型 type:"Identifier" // 标识符 type:"FuncationDeclaration ...

  4. ElasticSearch——Logstash输出到Elasticsearch配置

    位置 在Logstash的.conf配置文件中的output中配置ElasticSearch 示例: output { elasticsearch{ action => "index& ...

  5. C++typedef的详细用法

    转自知乎的一段解释: 作者:知乎用户链接:https://www.zhihu.com/question/29798061/answer/144423125来源:知乎著作权归作者所有.商业转载请联系作者 ...

  6. Spring Cloud(3):配置服务(Config)

    Spring Cloud Config的目标是在在大量的微服务中,将服务配置信息和和服务的实际物理部署分离,且服务配置服务不应与服务实例一起部署.配置信息应该作为环境变量传递给正在启动的服务,或者在服 ...

  7. vue添加滚动事件,解决简书Carol_笑一笑方案中vue移除滚动事件失效的问题

    在写项目的时候,遇到了需要添加滚动事件的问题,在简书Carol_笑一笑这里找到了解决方案.代码如下 <script> export default { name:"vue-scr ...

  8. Etherscan

    转载声明:https://blog.csdn.net/shebao3333/article/details/79858250 (仅方便自己查看及原文章被删除) 什么是Etherscan? 简单来说是一 ...

  9. Leetcode之动态规划(DP)专题-309. 最佳买卖股票时机含冷冻期(Best Time to Buy and Sell Stock with Cooldown)

    Leetcode之动态规划(DP)专题-309. 最佳买卖股票时机含冷冻期(Best Time to Buy and Sell Stock with Cooldown) 股票问题: 121. 买卖股票 ...

  10. 【DSP开发】DSP程序优化

    此文是在http://blog.csdn.net/guanchanghui/article/details/1181851基础上,通过自己的学习理解修改而来.暂且算作是自己的原创吧.如有侵权,联系,立 ...