Python编程进阶,Python如何实现多进程?
进程part1
很多人学习python,不知道从何学起。
很多人学习python,掌握了基本语法过后,不知道在哪里寻找案例上手。
很多已经做案例的人,却不知道如何去学习更加高深的知识。
那么针对这三类人,我给大家提供一个好的学习平台,免费领取视频教程,电子书籍,以及课程的源代码!
QQ群:101677771
一、进程介绍
进程就是正在运行的程序,它是操作系统中,资源分配的最小单位
资源分配:分配的是cpu和内存等物理资源,进程号是进程的唯一标识
获取当前进程–子进程
异步和同步:
1、获取子父进程
os.getpid()
获取当前进程的父进程
os.getppid()
为解决Windows系统和Linux系统的兼容问题,下面这句话必须加上:
__name__ == “__main__”
def func():
res1=os.getpid()
res2=os.getppid()
print(res1,res2)
#创建子进程,返回进程对象,执行func这个任务
if __name__ == "__main__":
P=Process(target=func)
P.start()
运行结果:
2、进程的基本使用
引用multiprocessing模块来创建以一个进程:
from multiprocessing import Process
import os
def func():
print("子进程为>>{},父进程为>>{}".format(os.getpid(),os.getppid()))
#为解决系统兼容性问题,必须加下面这句话
if __name__ == "__main__":
#创建子进程,返回进程对象,执行func这个任务
p=Process(target=func)
#调用子进程
p.start()
运行结果:
2、创建带有参数的进程
在进程对象的创建处使用args进行传参
from multiprocessing import Process
import os
def func(m,n):
print("子进程为>>{},父进程为>>{}".format(m,n))
#为解决系统兼容性问题,必须加下面这句话
if __name__ == "__main__":
#创建子进程,返回进程对象,执行func这个任务
p=Process(target=func,args=(os.getpid(),os.getppid()))
#调用子进程
p.start()
运行结果:
3、进程之间的数据彼此隔离
from multiprocessing import Process
import time
count=0
def func():
global count
count += 1
print("count:{}".format(count))
if __name__ == "__main__":
p=Process(target=func)
p.start()
time.sleep(1)
print(count)
运行结果:
如图,子进程对count的操作没有影响到主进程
4、多个进程之间的异步并发
多个进程之间是异步并发的程序,因为cpu的调度策略问题,不一定哪个程序先执行,哪个程序后执行
整体而言,主进程比子进程创建的速度要快,cpu遇到阻塞会立即切换任务,等到阻塞态的任务变成了就绪态,cpu再回来执行
主程序会默认等到所有子程序执行结束之后,再统一关闭程序,释放资源
若不等待,有可能在后台存有多个未执行结束的子进程,会变成僵尸进程,不停的占用cpu和内存。
import time,random,os
from multiprocessing import Process
def func(n):
time.sleep(random.randrange(3))
print("{},子进程:{},父进程:{}".format(n,os.getpid(),os.getppid()))
if __name__ == "__main__":
for i in range(10):
p=Process(target=func,args=(i,))
p.start()
print("主程序结束了")
print(os.getpid())
运行结果:
如图,因为多个进程之间是异步并发的,所以会产生以上结果
二、join
等待当前子进程全部执行完毕后,主进程再进行执行
1、基本语法
import os,time
from multiprocessing import Process
def func1():
print("子进程:{}".format(os.getpid()))
def func2():
time.sleep(0.5)
print("父进程:{}".format(os.getppid()))
if __name__ == "__main__":
p1=Process(target=func1)
p2=Process(target=func2)
p1.start()
p2.start()
#引入join,所有子进程执行完成后执行主进程
p1.join()
p2.join()
print("主进程执行完毕")
运行结果:
2、使用自定义类的方法创建进程
自定义进程类的要求:
- 必须继承Process这个父类
- 所有进程执行任务的逻辑必须写在run方法里面
基本写法:
import os,time
from multiprocessing import Process
class MyProcess(Process):
def run(self):
print("子进程:{},父进程:{}".format(os.getpid(),os.getppid()))
if __name__ == "__main__":
p=MyProcess()
p.start()
p.join()
print("主进程执行结束")
带有参数自定义类的方法:
import os,time
from multiprocessing import Process
class MyProcess(Process):
def __init__(self,arg):
self.arg=arg
super().__init__()
def run(self):
print(self.arg)
print("子进程:{} 主进程:{}".format(os.getpid(),os.getppid()))
if __name__=="__main__":
p=MyProcess(arg="我是传参")
p.start()
p.join()
print("主进程执行结束")
运行结果:
三、守护进程
守护进程守护的是主进程,如果主进程中的所有代码执行完毕了,当前这个守护进程会被立刻杀死,立即终止。
语法:
进程.daemon = True 设置当前这个进程为守护进程
必须在start()调用进程之前进行设置
默认:主进程会等待所有子进程执行结束后,再关闭程序,释放资源
from multiprocessing import Process
import time
def func1():
while True:
time.sleep(0.5)
print("我是守护进程!")
def func2():
time.sleep(3)
print("我是子进程!")
if __name__ == "__main__":
p1=Process(target=func1)
p2=Process(target=func2)
p1.daemon=True
p1.start()
p2.start()
time.sleep(2)
print("主进程执行")
运行结果:
案例:
监控报活: 利用守护进程特性,监控日志分析服务器是否存活
from multiprocessing import Process
import time
def alive():
while True:
time.sleep(0.5)
print("P1:服务器存活...")
def func():
count=0
while True:
try:
time.sleep(0.5)
print("P2:服务器日志分析中...")
time.sleep(1)
count += 1
if count == 3:
raise RuntimeError
except:
break
if __name__ == "__main__":
p1=Process(target=alive)
p2=Process(target=func)
p1.daemon=True
p1.start()
p2.start()
p2.join()
print("服务器出现异常!")
运行结果:
Python编程进阶,Python如何实现多进程?的更多相关文章
- python编程(python开发的三种运行模式)【转】
转自:http://blog.csdn.net/feixiaoxing/article/details/53980886 版权声明:本文为博主原创文章,未经博主允许不得转载. 目录(?)[-] 单循环 ...
- Python编程系列---Python中装饰器的几种形式及万能装饰器
根据函数是否传参 是否有返回值 ,可以分析出装饰器的四种形式: 形式一:无参无返回值 def outer(func): def wrapper(): print("装饰器功能1" ...
- 年薪20万Python工程师进阶(7):Python资源大全,让你相见恨晚的Python库
我是 环境管理 管理 Python 版本和环境的工具 pyenv – 简单的 Python 版本管理工具. Vex – 可以在虚拟环境中执行命令. virtualenv – 创建独立 Python 环 ...
- Python编程:从入门到实践(选记)
本文参考< Python 编程:从入门到实践>一书,作者: [ 美 ] Eric Matthes 第1章 起步 1.1 搭建python环境 在不同的操作系统中, Python 存 ...
- Python学习手册之 Python 之禅、Python 编程规范和函数参数
在上一篇文章中,我们介绍了 Python 的正则表达式使用示例,现在我们介绍 Python 之禅. Python 编程规范和函数参数.查看上一篇文章请点击:https://www.cnblogs.co ...
- 学Python编程能做什么工作?从事什么岗位?——这些问题你知道吗?
前言 学Python编程能做什么工作?随着人工智能发展,学习python语言的人员有更多的岗位机会,python从事的职业广泛,从游戏到AI人工智能能都可以用Python实现.除了编程,各种岗位的人都 ...
- 进击的Python【第七章】:Python的高级应用(四)面向对象编程进阶
Python的高级应用(三)面向对象编程进阶 本章学习要点: 面向对象高级语法部分 静态方法.类方法.属性方法 类的特殊方法 反射 异常处理 Socket开发基础 一.面向对象高级语法部分 静态方法 ...
- Python之路,Day8 - Socket编程进阶
Python之路,Day8 - Socket编程进阶 本节内容: Socket语法及相关 SocketServer实现多并发 Socket语法及相关 socket概念 socket本质上就是在2台 ...
- Day7 - Python基础7 面向对象编程进阶
Python之路,Day7 - 面向对象编程进阶 本节内容: 面向对象高级语法部分 经典类vs新式类 静态方法.类方法.属性方法 类的特殊方法 反射 异常处理 Socket开发基础 作业:开发一个 ...
随机推荐
- 【NOIP2016】天天爱跑步 题解(LCA+桶+树上差分)
题目链接 题目大意:给定一颗含有$n$个结点的树,每个结点有一个权值$w$.给定$m$条路径,如果一个点与路径的起点的距离恰好为$w$,那么$ans[i]++$.求所有结点的ans. 题目分析 暴力的 ...
- three.js 着色器材质之glsl内置函数
郭先生发现在开始学习three.js着色器材质时,我们经常会无从下手,辛苦写下的着色器,也会因莫名的报错而手足无措.原因是着色器材质它涉及到另一种语言–GLSL,只有懂了这个语言,我们才能更好的写出着 ...
- spring oauth2获取token时WARN:Could not decode JSON for additional information: BaseClientDetails解决办法
错误描述 简述:oauth_client_details表中additional_information字段默认为null,ClientDetails实体类中类型为Map<String,Obje ...
- “随手记”开发记录day19
将软件推荐给父母,先尝试使用软件,观察bug,若有啥不足的,才能及时修改.
- Python制作AI贪吃蛇,很多很多细节、思路都写下来了!
前提:本文实现AI贪吃蛇自行对战,加上人机对战,读者可再次基础上自行添加电脑VS电脑和玩家VS玩家(其实把人机对战写完,这2个都没什么了,思路都一样) 实现效果: 很多人学习python,不知道从何学 ...
- String 的两种实例化方式
String 的两种实例化方式 隐式实例化:直接赋值 public class Demo { public static void main(String[] args) { String s = & ...
- redis(二)redis的主从模式和集群模式
redis(二)redis的主从模式和集群模式 主从模式 集群模式 主从模式 redis的主从模式,指的是针对多台redis实例时候,只存在一台主服务器master,提供读写的功能,同时存在依附在这台 ...
- Docker容器网络-实现篇
通常,Linux容器的网络是被隔离在它自己的Network Namespace中,其中就包括:网卡(Network Interface).回环设备(Loopback Device).路由表(Routi ...
- 2020-05-29:redis怎么保证高可用,高可用模式有那些?对比下优缺点?
福哥答案2020-05-29: Redis 高可用架构如下:1.Redis Sentinel 集群 + 内网 DNS + 自定义脚本.2.Redis Sentinel 集群 + VIP + 自定义脚本 ...
- 链表(python)
一.链表和数组 在编写代码中,我们储存的数据是存储于内存当中,内存就像一块块并列排序的小方盒,每个小方盒都有自己地址,我们储存的数据就在这样一个个小方盒当中. 这些数据存放的结构有两种基本方式,数组和 ...