协程,yield,i多路复用,复习
课程回顾:
线程池
队列:同一进程内的队列
先进先出 后进先出 优先级队列
线程池中的回调函数是谁在调用?
线程池中的回调函数是子线程调用的,和父线程没有关系
进程池中的会点函数是父进程调用的,和子进程没有关系
今日内容:
为什么要有协程?
因为想要在单线程内实现并发的效果
因为CPthon有GIL锁,限制了在同一时间点,智能执行一个线程
所以想要在执行一个线程的期间,充分的利用cpu的性能
所以才有了想在单线程内实现并发的效果
并发: 切换+保存状态
1 因为某个程序阻塞了
2 因为某个程序用完了时间片
很明显 解决1 这个问题才能提高效率
所以想要实现单线程的并发,就是解决在单线程内,多个任务函数中某个任务遇见IO操作,马上自动切换到其他任务函数去执行.
协程: 是一个比线程更加轻量级的单位,是组成线程的各个函数
携程本身没有实体
greenlet模块:能简单的实现函数与函数之间的切换,但是遇到IO操作,不能自动切换到其他函数中
(1) 注册一下函数func,将函数注册成一个对象f1
f1 = greenlet(func)
(2) 调用函数func,使用f1.switch(),如果func需要传参,就在switch这里即可
gevent模块: 可以实现在某函数内部遇到IO操作,就自动的切换到其它函数内部去执行
g = gevnent.spawn(func,参数) 注册一下函数func,返回一个对象g
gevent.join(g)#等待g指向的函数func执行完毕,如果在执行过程中,遇到IO就切换
gevent.joinall([g1 ,g2 ,g3 ])#等待g1 , g2, g3指向的函数func执行完毕
大的总结:协程使用户自己去调度的,
面试题:
已经学习过了进程,线程,协程
计算密集用多进程,可以充分利用多核cpu的性能
IO密集用多线程(注意,协程是在单线程的)
多线程和协程的区别
线程是由操作一同调度,控制
协程是由程序员自己调度,控制
IO多路复用
阻塞IO
非阻塞IO
多路复用IO
异步IO python实现不了,但是有tornado框架,天生自带异步
异步现在可以用 asyncio
面试题
select
select 和 poll 和 epoll的区别
select和poll有一个共同的机制,都时采用轮询的方式去询问内核,有没有数据准备好了
select有一个最大监听事件的限制,32位机限制1024,64位机限制2048
poll没有,理论上poll可以开启无限大,1G内存大概够你开10w个事件去监听
epoll是最好的,采用的是回调机制,解决了select和poll共同存在的问题
而且epoll理论上也可以开启无线多个监听事件
并发的本质: 切换 + 保存状态
协程,yield,i多路复用,复习的更多相关文章
- 多线程、多进程、协程、IO多路复用请求百度
最近学习了多线程.多进程.协程以及IO多路复用,那么对于爬取数据来说,这几个方式哪个最快呢,今天就来稍微测试一下 普通方式请求百度5次 import socket import time import ...
- 协程与IO多路复用
IO多路复用 I/O多路复用 : 通过一种机制,可以监视多个描述符,一旦某个描述符就绪(一般是读就绪或者写就绪),能够通知程序进行相应的读写操作. Python Python中有一个select模块, ...
- python第十周:进程、协程、IO多路复用
多进程(multiprocessing): 多进程的使用 multiprocessing是一个使用类似于线程模块的API支持产生进程的包. 多处理包提供本地和远程并发,通过使用子进程而不是线程有效地侧 ...
- Unity3D协程yield的理解
Unity3D的协程概括地将就是:对于一段程序,你可以加上yield标明哪里需要暂停,然后在下一帧或者一段时间后,系统会继续执行这段代码.协程的作用:①延迟一段时间执行代码.②等某个操作完成之后再执行 ...
- (并发编程)进程池线程池--提交任务2种方式+(异步回调)、协程--yield关键字 greenlet ,gevent模块
一:进程池与线程池(同步,异步+回调函数)先造个池子,然后放任务为什么要用“池”:池子使用来限制并发的任务数目,限制我们的计算机在一个自己可承受的范围内去并发地执行任务池子内什么时候装进程:并发的任务 ...
- 进程,线程,协程,io多路复用 总结
并发:要做到同时服务多个客户端,有三种技术 1. 进程并行,只能开到当前cpu个数的进程,但能用来处理计算型任务 ,开销最大 2. 如果并行不必要,那么可以考虑用线程并发,单位开销比进程小很多 线程: ...
- Python 多进程 多线程 协程 I/O多路复用
引言 在学习Python多进程.多线程之前,先脑补一下如下场景: 说有这么一道题:小红烧水需要10分钟,拖地需要5分钟,洗菜需要5分钟,如果一样一样去干,就是简单的加法,全部做完,需要20分钟:但是, ...
- U3D协程yield的使用和理解
部分内容参考网址:http://blog.csdn.net/huang9012/article/details/29595747 Win7+U3D 4.6.7 1.在c#中使用①首选需要定义一个返回值 ...
- Python之路,Day9 - 线程、进程、协程和IO多路复用
参考博客: 线程.进程.协程: http://www.cnblogs.com/wupeiqi/articles/5040827.html http://www.cnblogs.com/alex3714 ...
随机推荐
- 第28课 “共享状态”提供者(std::promise/std::package_task)
一. std::promise和std::package_task (一)共享状态.提供者和管理者 // CLASS TEMPLATE _Promise template <class _Ty& ...
- linux _文件目录与权限
1. 目录相关 . 代表次层目录 .. 代表上一层目录 - 代表前一个工作目录 ~ 代表目前使用者身份所在home目录 ~account 代表account这个使用者的home目录 cd 切换目录(c ...
- SWIG 3 中文手册——5. SWIG 基础知识
目录 5 SWIG 基础知识 5.1 运行 SWIG 5.1.1 输入格式 5.1.2 SWIG 输出 5.1.3 注释 5.1.4 C 预处理器 5.1.5 SWIG 指令 5.1.6 解析限制 5 ...
- Redis学习之ziplist压缩列表源码分析
一.压缩列表ziplist在redis中的应用 1.做列表键 当一个列表键只包含少量列表项,并且每个列表项要么是小整数,要么是短字符串,那么redis会使用压缩列表作为列表键的底层实现 2.哈希键 当 ...
- Mybatis连接MySQL时,可以使用的JDBC连接字符串参数
一.举例 spring.datasource.url=jdbc:mysql://127.0.0.1:3306/test_db?useAffectedRows=true&allowMultiQu ...
- 字节输出流FileOutputStream
#字节流 字节输出流FileOutputStream 创建输出流对象 OutputStream 流对象是一个抽象类,不能实例化.所以,我们要找一个具体的子类 :FileOutputStream. 查看 ...
- eclipse对Java项目进行单元测试
一.右键项目名->buildpath->configure buildpath->add library->junit->选择版本(以4为例)->apply-> ...
- JavaScript 究竟是怎样执行的?
摘要: 理解 JS 引擎运行原理. 作者:前端小智 原文:搞懂 JavaScript 引擎运行原理 Fundebug经授权转载,版权归原作者所有. 一些名词 JS 引擎 - 一个读取代码并运行的引擎, ...
- vue+element表单校验功能
要实现这个功能其实并不难,element组件直接用就可以, 但是我在使用过程中碰到了几个坑,就记录下来,分享给大家,避免落坑,话不多说,直接上过程...... 表单校验功能: 实现这个功能,总共分 ...
- SQL报错注入
0x00:前言 sqli-libs第11关的报错注入,之前没有具体学习了解过,所以单独学习一下. 0x01:例子 uname=1&passwd=1' union select count(*) ...