问题一: 计算机是如何执行程序指令的?

问题二: 计算机如何实现并发的?

轮询调度实现并发执行 程序1-8轮询完成,才再CPU上运行

问题三: 真正的并行需要依赖什么?

并行需要的核心条件

多进程实现并行

问题一: 什么是进程?

计算机程序是存储在磁盘上的文件。

  只有把它们加载到内存中,并被操作系统调用 它们才会拥有其自己的生命周期。

进程表示一个正在执行的程序。

  每个进程都有独立地址空间以及其他的辅助数据

进程(Process)

  是计算机中已运行程序的实例

问题二: 如何在Python中使用进程?

import multiprocessing   # 导入进程模块
import datetime
import time def func(data): while True:
print(datetime.datetime.now()) sum = data + 100
print(sum)
time.sleep(2) print(datetime.datetime.now()) if __name__ == '__main__': p = multiprocessing.Process(target=func, args=(123,)) # 创建一个进程,args传参 必须是元组
p.start() # 运行线程p while True:
time.sleep(2)
print("我是主进程")

进程使用步骤

问题三: 多进程实现并行的必要条件是什么?

总进程数量不多于 CPU核心数量!

如果不满足,那么运行的程序都是 轮询调度产生的假象。

多线程实现并发

问题一:什么是线程?

线程被称作轻量级进程。
  线程是进程中的一个实体,操作系统不会为进程分配内存空间,它只有一点在运行中必不可少的资源
线程被包含在进程中,是进程中的实际运作单位
  同一个进程内的多个线程会共享相同的上下文,
  也就是共享资源(内存和数据)。
线程(thread)
  是操作系统能够进行运算调度的最小单位

问题二: 如何在Python中使用线程?

import multiprocessing  # 引用进程模块
import threading # 引用线程模块
import time def func(data):
while True:
time.sleep(1)
data += 1
print(data) # mult = multiprocessing.Process(target=func, args=(1314,))
# mult.start() # 运行进程 thre = threading.Thread(target=func, args=(500,)) # 创建一个线程
thre.start() # 运行线程 print("这是主进程")

进程使用步骤

问题三: 为什么多线程不是并行?

稳定性
  进程具有独立的地址空间,一个进程崩溃后,不会对其它进程产生影响。
  线程共享地址空间,一个线程非法操作共享数据崩溃后,整个进程就崩溃了。
创建开销
  创建进程操作系统是要分配内存空间和一些其他资源的。开销很大
  创建线程操作系统不需要再单独分配资源,开销较小
切换开销
  不同进程直接是独立的, 切换需要耗费较大资源
  线程共享进程地址空间, 切换开销小

GIL锁(线程锁)

Python在设计的时候,还没有多核处理器的概念。
因此,为了设计方便与线程安全,直接设计了一个锁。
这个锁要求,任何进程中,一次只能有一个线程在执行。

因此,并不能为多个线程分配多个CPU。
所以Python中的线程只能实现并发,
而不能实现真正的并行。

但是Python3中的GIL锁有一个很棒的设计,
在遇到阻塞(不是耗时)的时候,会自动切换线程。

很多库是基于GIL锁写的,取消代价太大
进程可以实现并行和并发
线程只能实现并发

遇到阻塞就自动切换。
我们可以利用这种机制来
充分利用CPU

那么最后:

使用多进程与多线程来实现并发服务器

使用多进程与多线程实现并发服务器的关键点
关键点一: 多进程是并行执行,
                 相当于分别独立得处理各个请求。
关键点二: 多线程,虽然不能并行运行,
                 但是可以通过避开阻塞切换线程
                 来实现并发的效果,并且不浪费cpu

服务端实现代码:

import threading  # 创建一个线程
import socket server = socket.socket()
server.bind(('0.0.0.0', 8888))
server.listen() # 监听 def workon(conn):
while True:
data = conn.recv(1024) if data == b'':
conn.close()
break
else:
print("接收到的消息: {}".format(data.decode()))
conn.send(data) # 主线程
while True:
conn, addr = server.accept()
print("{}正在连接".format(addr)) # 线程去处理消息
p = threading.Thread(target=workon, args=(conn,))
p.start()

客户端代码:

import socket

click = socket.socket()
click.connect(('127.0.0.1', 8888)) while True:
data = input("请输入你要发送的数据:")
click.send(data.encode())
print("接收到的消息: {}".format(click.recv(1024).decode()))

总结完成!

作者:含笑半步颠√

博客链接:https://www.cnblogs.com/lixy-88428977

声明:本文为博主学习感悟总结,水平有限,如果不当,欢迎指正。如果您认为还不错,欢迎转载。转载与引用请注明作者及出处。

python_并行与并发、多线程的更多相关文章

  1. c++11并行、并发与多线程编程

    首先,我们先理解并发和并行的区别. 你吃饭吃到一半,电话来了,你一直到吃完了以后才去接,这就说明你不支持并发也不支持并行. 你吃饭吃到一半,电话来了,你停了下来接了电话,接完后继续吃饭,这说明你支持并 ...

  2. C#并行编程-并发集合

    菜鸟学习并行编程,参考<C#并行编程高级教程.PDF>,如有错误,欢迎指正. 目录 C#并行编程-相关概念 C#并行编程-Parallel C#并行编程-Task C#并行编程-并发集合 ...

  3. Java 并行与并发

    Java 并行与并发 注意两个词:并行(Concurrent) 并发(Parallel) 并行:是逻辑上同时发生,指在某一个时间内同时运行多个程序 并发:是物理上同时发生,指在某一个时间点同时运行多个 ...

  4. python网络编程基础(线程与进程、并行与并发、同步与异步、阻塞与非阻塞、CPU密集型与IO密集型)

    python网络编程基础(线程与进程.并行与并发.同步与异步.阻塞与非阻塞.CPU密集型与IO密集型) 目录 线程与进程 并行与并发 同步与异步 阻塞与非阻塞 CPU密集型与IO密集型 线程与进程 进 ...

  5. Clojure的并行与并发

    这次来聊聊clojure的并行与并发,如果你还不知clojure为何物,请翻翻我的上一篇推文.“并行”是指clojure对并行计算的支持(parallel computing),“并发”是其并发特性( ...

  6. java并发多线程显式锁Condition条件简介分析与监视器 多线程下篇(四)

    Lock接口提供了方法Condition newCondition();用于获取对应锁的条件,可以在这个条件对象上调用监视器方法 可以理解为,原本借助于synchronized关键字以及锁对象,配备了 ...

  7. java 并发多线程 锁的分类概念介绍 多线程下篇(二)

    接下来对锁的概念再次进行深入的介绍 之前反复的提到锁,通常的理解就是,锁---互斥---同步---阻塞 其实这是常用的独占锁(排它锁)的概念,也是一种简单粗暴的解决方案 抗战电影中,经常出现为了阻止日 ...

  8. java 并发多线程显式锁概念简介 什么是显式锁 多线程下篇(一)

    目前对于同步,仅仅介绍了一个关键字synchronized,可以用于保证线程同步的原子性.可见性.有序性 对于synchronized关键字,对于静态方法默认是以该类的class对象作为锁,对于实例方 ...

  9. 《Go语言实战》摘录:6.1 并发 - 并行 与 并发

    6.1 并行 与 并发

随机推荐

  1. 新款戴尔笔记本win10系统改win7 安装教程

    下载U盘启动制作工具 及戴尔DELL ghost win7 旗舰版GHO 文件 下载地址:http://pan.baidu.com/s/1c17JqpU  插入制作好的U盘启动盘,开机按F2进入BIO ...

  2. mysql优化查找执行慢的sql

    想要进行sql优化,肯定得先找出来需要优化的sql语句 一.mysql有一个自带的sql执行慢记录日志文件,所记录的日志取决于参数long_query_time控制,默认情况下long_query_t ...

  3. [Beta阶段]第三次Scrum Meeting

    Scrum Meeting博客目录 [Beta阶段]第三次Scrum Meeting 基本信息 名称 时间 地点 时长 第三次Scrum Meeting 19/05/05 大运村寝室6楼 30min ...

  4. linux中nohup 与 & 的区别

    Linux/Unix下,通常只有守护进程可在脱离终端的情况下能继续执行,而普通进程在关闭终端时会因收到SIGHUP信号(挂起信号)而退出.当终端退出后,由该终端启动的后台程序自动退出. 若想命令在后台 ...

  5. Systemd笔记

    Systemd管理的启动脚本位于 /usr/lib/systemd/system/ 下 Systemd启动顺序约定为: 当前服务满足启动条件, 则立即创建进程进行并行启动, 启动条件指服务的依赖关系( ...

  6. 累积分布函数(cumulative distribution function)

    sklearn实战-乳腺癌细胞数据挖掘(博客主亲自录制视频教程,QQ:231469242) https://study.163.com/course/introduction.htm?courseId ...

  7. CentOS7 升级 cmake

    编译cmake文件时,报错:CMake 3.0.0 or higher is required. You are running version 2.8.12.2 很明显,这是 cmake 版本过低导 ...

  8. Ubuntu下卸载anaconda

    转载:https://blog.csdn.net/m0_37407756/article/details/77968724(一)删除整个anaconda目录: 由于Anaconda的安装文件都包含在一 ...

  9. PHP 字符串和十六进制互转

    今天在做项目中,因为要调用别人网站的接口,结果需要对请求和返回的时间进行十六进制加密处理,于是在网上查了下资料谢了一个转换Demo做个记录. 如果在TP下使用可以将下面函数放到common.php中 ...

  10. 解决VM Workstation安装VMware Tools显示灰色的办法

    其实虚拟机用了好多次了,但是每次使用配置时还是忘这忘那的,这里就简单地再啰嗦下了. 解决办法如下: 1.关闭虚拟机: 2.在虚拟机设置分别设置CD/DVD.CD/DVD2和软盘为自动检测三个步骤: 3 ...