初识asyncio协程

一、基本概念

​ 要想了解学习协程相关知识要先对以下几个概念先行了解:

  • 阻塞

    ​ 阻塞状态是指程序未得到某所需计算资源时的挂起状态,简单说就是程序在等待某个操作未执行完前无法执行其他操作。

  • 非阻塞

    ​ 非阻塞状态是指在等待某项操作执行完前可以继续运行其他操作,也就是不会被阻塞。

  • 同步

    ​ 不同程序单元为了完成某项任务,在执行过程中以某种通信方式保证协调一致,假如有一个售票窗口,你必须等前面的人买完票,轮到你才能买,简言之同步意味着有序。

  • 异步

    ​ 不同程序单元为了完成某项任务,在执行过程中无需进行通信也能完成任务,例如爬虫,只要抓取目标url即可,无需关心其它抓取目标,简言之异步意味着无序。

  • 并发

    ​ 简单说就是操作系统在处理多个任务时快速切换,例如你在看电视时来电话了,此时你选择关闭电视,接完电话再打开看,这样的过程就是并发;

  • 并行

    ​ 简单说就是操作系统同时处理多个任务,例如你在看电视时来电话了,此时你选择边看电视边接电话,这样的过程就是并行。

  • 协程

    ​ 协程拥有自己的寄存器上下文和栈。协程调度切换时,将寄存器上下文和栈保存到其他地方,在切回来的时候,恢复先前保存的寄存器上下文和栈。因此协程能保留上一次调用时的状态,即所有局部状态的一个特定组合,每次过程重入时,就相当于进入上一次调用的状态。

二、asyncio 异步I/O

asyncio是用来编写并发代码的库,被用作多个提供高性能异步框架的基础,往往是构建I/O密集型和高层级结构化网络代码的最佳选择。

​ 在了解asyncio的使用方法前,首先有必要先介绍一下,这几个贯穿始终的概念:

  • event_loop事件循环:程序开启一个无限的事件循环,程序员会把一些函数注册到事件循环上。当满足事件发生的时候,调用相应的协程函数。

  • coroutine协程:协程对象,指一个使用async关键字定义的函数,它的调用不会立即执行函数,而是会返回一个协程对象。协程对象需要注册到事件循环,由事件循环调用。

  • task任务:一个协程对象就是一个原生可以挂起的函数,任务则是对协程进一步封装,其中包含任务的各种状态。

  • future对象:代表将来执行或没有执行的任务的结果,与task没有本质上的区别。

  • async/await关键字:python3.5 用于定义协程的关键字,async定义一个协程,await用于挂起阻塞的异步调用接口。

三、定义一个协程

​ 干看概念总归是难以理解并记住的,下面动手来实现一个协程

from collection.abc import Coroutine

async def a(name):
print('hello',name) if __name__ == '__main__':
test = a('world') # 输出 hello world
print(isinstance(test,Coroutine)) # 输出 True

通过以上的实例我们就完成了一个最简单的协程,可以发现其与普通函数不同的仅仅是在函数名前加了async

四、协程的工作流程

一个完整的协程工作流程如下:

  • 定义/创建一个协程对象

  • 将协程转为task任务

  • 定义事件循环容器

  • 将task任务放到事件循环容器触发

参照下面示例可以完整了解这个流程:

import asyncio

async def a(name):  # 定义一个协程
print('hello',name) if __name__ == "__main__":
coroutine = a('world') # 第一步,定义一个协程对象
task = asyncio.ensure_future(coroutine) # 第二步,将协程转换成task任务
loop = asyncio.get_event_loop() # 第三步,定义一个事件循环容器
loop.run_until_complete(task) # 第四步,将task任务放到事件循环容器

五、阻塞和await

​ 在程序运行过程中遇到耗时的操作时会挂起该协程,转而执行别的协程,当挂起的协程运行完毕时再从别的协程切换回去,不等当前这个协程运没运行完毕。举个例子:假如有协程A和协程B,当协程A遇到阻塞耗时的操作时便转向运行协程B,当协程A的耗时操作结束再从协程B切换回去,不管协程B有没有运行完毕。

​ 由前面asyncio的概念可以知道,使用await可以挂起一个协程。

import asyncio

async def a(name):
await asyncio.sleep(3) # 模拟耗时的操作,不用time.sleep是因为time模块不支持异步
print('hello',name) if __name__ == "__main__":
coroutine = a('world')
loop = asyncio.get_event_loop()
loop.run_until_complete(coroutine)

补充说明await后面的对象必须的格式:

  • 原生协程(coroutine)对象
  • 一个由types.coroutine()修饰的生成器
  • 一个包含_await方法的对象返回的一个迭代器

    简言之就是协程,任务,Future三种

总结:至此我们已经初步了解了什么是异步,什么是asyncio,以及协程的工作流程,并进行了实践。

一、初识asyncio协程的更多相关文章

  1. 二、深入asyncio协程(任务对象,协程调用原理,协程并发)

      由于才开始写博客,之前都是写笔记自己看,所以可能会存在表述不清,过于啰嗦等各种各样的问题,有什么疑问或者批评欢迎在评论区留言. 如果你初次接触协程,请先阅读上一篇文章初识asyncio协程对asy ...

  2. python并发编程之asyncio协程(三)

    协程实现了在单线程下的并发,每个协程共享线程的几乎所有的资源,除了协程自己私有的上下文栈:协程的切换属于程序级别的切换,对于操作系统来说是无感知的,因此切换速度更快.开销更小.效率更高,在有多IO操作 ...

  3. 后台程序处理 (一)python asyncio 协程使用

    由于脚本需要在完成事件处理后N秒检查事件处理结果,当执行失败时再执行另一个事件处理. 想要最小化完成这个功能.同时在第一时间就将执行完毕的结果反馈给接口. 因此想到使用协程. 使用之前先翻阅了一下现有 ...

  4. python---异步IO(asyncio)协程

    简单了解 在py3中内置了asyncio模块.其编程模型就是一个消息循环. 模块查看: from .base_events import * from .coroutines import * #协程 ...

  5. asyncio协程与并发

    并发编程 Python的并发实现有三种方法. 多线程 多进程 协程(生成器) 基本概念 串行:同时只能执行单个任务 并行:同时执行多个任务 在Python中,虽然严格说来多线程与协程都是串行的,但其效 ...

  6. python asyncio 协程调用task步骤

    import asyncio async def compute(x, y): print("Compute %s + %s ..." % (x, y)) await asynci ...

  7. python 并发专题(十三):asyncio (二) 协程中的多任务

    . 本文目录# 协程中的并发 协程中的嵌套 协程中的状态 gather与wait . 协程中的并发# 协程的并发,和线程一样.举个例子来说,就好像 一个人同时吃三个馒头,咬了第一个馒头一口,就得等这口 ...

  8. python并发编程之Queue线程、进程、协程通信(五)

    单线程.多线程之间.进程之间.协程之间很多时候需要协同完成工作,这个时候它们需要进行通讯.或者说为了解耦,普遍采用Queue,生产消费模式. 系列文章 python并发编程之threading线程(一 ...

  9. python并发编程之进程、线程、协程的调度原理(六)

    进程.线程和协程的调度和运行原理总结. 系列文章 python并发编程之threading线程(一) python并发编程之multiprocessing进程(二) python并发编程之asynci ...

随机推荐

  1. 第八篇:ZTree操作总结

    花了一个多星期,终于完成了这个完整的功能,今天周五是时候总结下加深理解了. 项目要实现的功能:将树形目录发布到发布库,若是根目录,没有发布,连同自己和下面所有的子目录们全部发布:不是根目录,判断父目录 ...

  2. AQS(队列同步器)

    目录导引: 一.简介 二.源码解析(JDK8) 三.运用示例 一.简介 1.volatile volatile修饰的共享变量可以保证可见性和有序性(禁止指令重排序). 2.CAS: CAS的原理很简单 ...

  3. SQFREE - Square-free integers

    SQFREE - Square-free integers 求n以内,约数中不包含任意一个平方数的个数,\(n≤10^{14}\). 解 显然为约数计数问题,于是想办法转换为代数问题,不难列出 \[a ...

  4. [JZOJ4788] 【NOIP2016提高A组模拟9.17】序列

    题目 描述 题目大意 一个序列,每次可以使一段区间内的所有数加一(模四). 问最少的操作次数. 思考历程 一看这题目,诶,这不就是那道叫密码锁的题目吗? 然后随便打一打,样例过了,就再也没有思考这一题 ...

  5. JavaScrip中的循环语句

    循环语句 循环语句,也是流程控制语句中不可或缺的一种结构.在 JavaScrip中实现循环的方式有好几个一个来看 1.为什么需要循环 在具体介绍 Javascript中的循环之前,首先我们来明确一个问 ...

  6. 19-11-13-Night-∠

    连夜补博客 ZJ: 看见T1就自闭了.(高考数学)(但是好像不是) 三个暴力就结束了. 35 Miemeng 20 00:00:41 10 00:00:41 10 00:00:41 40 00:00: ...

  7. vue + element-ui实现简洁的导入导出功能

    1.安装ElementUI模块 cnpm install element-ui -S 2.在main.js中引入 import ElementUI from 'element-ui' import ' ...

  8. SpringBoot学习笔记(五):SpringBoot集成lombok工具、SpringBoot集成Shiro安全框架

    SpringBoot集成lombok工具 什么是lombok? 自动生成setget方法,构造函数,打印日志 官网:http://projectlombok.org/features/index. 平 ...

  9. 2019牛客暑假多校赛(第二场) F和H(单调栈)

    F-Partition problem https://ac.nowcoder.com/acm/contest/882/F 题意:输入一个数n,代表总共有2n个人,然后每个人对所有人有个贡献值,然后问 ...

  10. 关于不同数据库的连接配置(MySql和Oracle)

    mysql: driverClass=com.mysql.jdbc.Driver #在和mysql传递数据的过程中,使用unicode编码格式,并且字符集设置为utf-8,插入数据库防止中文乱码 ur ...