1. 复习 # !/usr/bin/env python # !--*--coding:utf-8 --*-- # !@Time :2018/7/23 11:49 # !@Author TrueNewBee # 1.班级 姓名 作业的内容 # ftp # # 笔记 # 今天的内容 # 协程 # 网络IO模型 2.协程 # !/usr/bin/env python # !--*--coding:utf-8 --*-- # !@Time :2018/7/23 11:52 # !@Author Tru…

一.单线程的并发 import socket import select client1 = socket.socket() client1.setblocking(False) # 百度创建连接: 非阻塞 try: client1.connect(('www.baidu.com',80)) except BlockingIOError as e: pass client2 = socket.socket() client2.setblocking(False) # 搜狗创建连接: 非阻塞 tr…

1.IO多路复用 作用:检测多个socket是否已经发生变化(是否连接成功/是否已经获取数据) 什么是进程.线程.协程以及它们的区别? 进程是资源分配的最小单元,其作用是进行数据隔离, 线程是cpu调度的最小单元,其作用主要是执行某个任务, 一个应用程序可以有多个进程,一个进程可以有多个线程,在其他语言中几乎很少用进程,都是用多线程,而对于python来说,IO操作主要是用多线程实现,计算密集型操作主要是用多进程实现,主要原因是python中存在GIL锁,GIL锁的作用就是保证一个进程中同一时刻…

一.铺垫:基于socket发送http请求 1.需求一:向百度发送请求搜索关键字“alex”,有如下两种方式: import requests ret = requests.get('https://www.baidu.com/s?wd=alex') 方式一(用requests模块): import socket sk = socket.socket() # 与百度创建连接: 阻塞 sk.connect(('www.baidu.com',80)) # 跟说百度我要什么? sk.sendall(b…

一.IO多路复用 IO多路复用:检测多个socket是否已经发生变化(是否已经连接成功/是否已经获取数据)(可读/可写) import socket def get_data(key): client = socket.socket() client.setblocking(False) #将原阻塞的位置变成非阻塞 try: client.connect(("www.baidu.com",80)) #因为没有等待所以会报错 except BlockingIOError as e: pa…

协程代码1 #!/usr/bin/env python # -*- coding;utf-8 -*- # 导入协程模块 """ 协程工作原理 """ import greenlet from greenlet import greenlet def text1(): print(12) gr2.switch() print(56) gr2.switch() def text2(): print(34) gr1.switch() print(78)…

select注册fd,阻塞,当有fd状态改变时返回,确认对应的fd,做下一步处理.简单来说就是先注册,注册完后休眠并设置一个定时器醒来查看,有事件就通知来取,进行后续动作,没事件就继续睡,再设闹钟.用代码表示就是int flag;while(1){if flag blablabla;else sleep(n)}:select的核心思想就是在把阻塞等待的时间让给他人,让其他任务把资源利用起来,让内核负责监听.当然,select的flag是一个i/o集合,可以对不flag实现不同处理,便于编程. 当…

socket # 一.socket # TCP服务端 import socket # 导入socket tcp_sk = socket.socket() # 实例化一个服务器对象 tcp_sk.bind(('127.0.0.1', 8080)) # 服务器绑定一个IP地址和端口 tcp_sk.listen() # 监听连接 # conn可以理解为在服务端中与客户端进行交互的操作符(对象) # addr是客户端的IP地址和端口 conn, addr = tcp_sk.accept() # 接受客户…

并发:要做到同时服务多个客户端,有三种技术 1. 进程并行,只能开到当前cpu个数的进程,但能用来处理计算型任务 ,开销最大 2. 如果并行不必要,那么可以考虑用线程并发,单位开销比进程小很多 线程:并发(轮询调度,遇到阻塞就切换) 只要是网络,就会有延迟,有延迟就阻塞,所以比一般的单路要好些 3. 如果轮询不必要,可考虑是否可以只需要遇到阻塞切换 就可以用IO多路复用技术 + 协程来实现阻塞切换,消耗资源很少,并发量最高…

此文已由作者张耕源授权网易云社区发布. 欢迎访问网易云社区,了解更多网易技术产品运营经验. 在最近发布的 Python 3.5 版本中,官方正式引入了 async/await关键字.在 asyncio [1] 标准库中实现了IO多路复用.原生协程(coroutine)与 事件循环(event loop),让人耳目一新,本文也尝试对 Python 3.5 新增加的原生协程 机制与asyncio标准库相关的内容做一个小结. IO多路复用与协程的引入,可以极大的提高高负载下程序的IO性能表现.几年前,…