使用select异步IO实现socketserver服务器 源码剖析
#_*_coding:utf-8_*_
#这是一个echo server,客户端消息,服务端回复相同的消息
import select, socket, sys, queue # Create a TCP/IP socket
server = socket.socket(socket.AF_INET, socket.SOCK_STREAM) #对socket进行实例化,拿到server句柄
server.setblocking(False) #设置server为不阻塞 # Bind the socket to the port
server_address = ('localhost', 10000) #将主机名,端口号赋值给server_address
print(sys.stderr, 'starting up on %s port %s' % server_address) #如有错误信息,输出,并打印strting up...
server.bind(server_address) #绑定服务器ip端口号给socket实例化后的句柄 # Listen for incoming connections
server.listen(5) #允许最大监听链接5 # Sockets from which we expect to read
inputs = [ server ] #设置客户端和服务端的socket句柄列表,后续都会append到其中 # Sockets to which we expect to write
outputs = [ ] #设置echo给客户端的socket句柄,后续会append到其中 message_queues = {} #设置消息队列字典,后续存放
while inputs: #维护所有服务端和客户端过来的连接 # Wait for at least one of the sockets to be ready for processing
print( '\nwaiting for the next event')
readable, writable, exceptional = select.select(inputs, outputs, inputs) #执行select.select方法,将输入的句柄、输出的句柄和错误信息,分别赋值给readable、writeable、exceptional
# Handle inputs
for s in readable: #遍历服务端和客户端请求过来的socket句柄 if s is server: #如果是客户端连接的句柄
# A "readable" server socket is ready to accept a connection
connection, client_address = s.accept() #接收连接请求
print('new connection from', client_address) #打印新请求连接信息
connection.setblocking(False) #设置为连接非阻塞,否则即使将会hang住
inputs.append(connection) #将客户端连接的句柄append到inputs列表,下一次select的时候能够检测这个连接 # Give the connection a queue for data we want to send
message_queues[connection] = queue.Queue() #连接进来后,把发的消息放到这个队列;以连接的句柄作为key,来以字典形式存放队列信息,保证每个连接的句柄发送的数据都是隔离的
else: #如果是服务端连接的句柄
data = s.recv(1024) #接收客户端发来的数据
if data: #如果客户端发过来的数据不为空
# A readable client socket has data
print(sys.stderr, 'received "%s" from %s' % (data, s.getpeername()) ) #如果有错误,打印错误信息
message_queues[s].put(data) #放到以客户端socket的句柄为key的字典里,数据作为value存放
# Add output channel for response
if s not in outputs: 如果当前客户端的连接句柄没有在outputs这个待发送的列表中
outputs.append(s) #先不给客户端发送其发来的数据,因为如果客户端没有空闲,就会造成阻塞。先把要发送的数据append到outputs自己维护的这个列表,下次select的时候,这个列表就不为空了,那个时候再给客户端发送数据
else: #如果客户端发过来的数据是空
# Interpret empty result as closed connection
print('closing', client_address, 'after reading no data') #打印关闭信息
# Stop listening for input on the connection
if s in outputs: #如果当前客户端的句柄,在要回复数据的列表中
outputs.remove(s) #既然客户端都断开了,我就不用再给它返回数据了,所以这时候如果这个客户端的连接对象还在outputs列表中,就把它删掉
inputs.remove(s) #inputs中也删除掉
s.close() #把这个连接关闭掉 # Remove message queue
del message_queues[s] #删掉客户端这个socket发过来的数据
# Handle outputs
for s in writable: #这是要给客户端回复数据的列表,这列表是自己维护的
try:
next_msg = message_queues[s].get_nowait() #取出当前客户端的socket句柄对应的消息
except queue.Empty: #如果这个客户端的socket句柄对应的消息是空的话
# No messages waiting so stop checking for writability.
print('output queue for', s.getpeername(), 'is empty') #打印空队列消息
outputs.remove(s) #移除这个客户端的socket句柄
else: #如果没有报错的话
print( 'sending "%s" to %s' % (next_msg, s.getpeername())) #打印发送数据
s.send(next_msg) #服务器真正给客户端发送之前客户端发过来的数据
# Handle "exceptional conditions"
for s in exceptional: #在客户端断开的情况下,会赋值给exceptional
print('handling exceptional condition for', s.getpeername() ) #打印错误信息
# Stop listening for input on the connection
inputs.remove(s) #删除客户端socket对应的句柄
if s in outputs: #如果在要发的消息列表中存在客户端的socket句柄
outputs.remove(s) #删除客户端的socket句柄
s.close() #服务器关闭这个客户端先断开的连接 # Remove message queue
del message_queues[s] #删除掉客户端socket句柄对应的消息
使用select异步IO实现socketserver服务器 源码剖析的更多相关文章
- select用法&原理详解(源码剖析)(转)
今天遇到了在select()前后fd_set的变化问题,查了好久终于找到一个有用的帖子了,很赞,很详细!!原文链接如下: select用法&原理详解(源码剖析) 我的问题是: 如下图示:在se ...
- socket_server源码剖析、python作用域、IO多路复用
本节内容: 课前准备知识: 函数嵌套函数的使用方法: 我们在使用函数嵌套函数的时候,是学习装饰器的时候,出现过,由一个函数返回值是一个函数体情况. 我们在使用函数嵌套函数的时候,最好也这么写. def ...
- IO多路复用及ThreadingTCPServer源码阅读
IO多路复用 socket模块是阻塞的,通过socket建立的服务端可以接收多个请求,但只能同时处理一个请求,其他请求都被阻塞.可以通过IO多路复用解决这个问题,socketserver内部使用的就是 ...
- 自己实现多线程的socket,socketserver源码剖析
1,IO多路复用 三种多路复用的机制:select.poll.epoll 用的多的两个:select和epoll 简单的说就是:1,select和poll所有平台都支持,epoll只有linux支持2 ...
- socketserver 源码剖析:
socketserver 源码剖析[有图有真相]: (一).Socketserver 内部流程调用图: 详解: 1.self.RequestHandlerClass() = MyCla ...
- rsyn实现服务器源码同步
近期技术总监提出,要建立预生产环境,代码实现灰度发布.需要多台服务器源码保持一致. 实施步骤 1.安装rsyn服务端并添加环境变量. 2.安装客户端并配置环境变量. 3.更改配置文件并开放防火墙端口. ...
- 图解 Java IO : 二、FilenameFilter源码
Writer :BYSocket(泥沙砖瓦浆木匠) 微 博:BYSocket 豆 瓣:BYSocket FaceBook:BYSocket Twitter ...
- Socketserver的源码分析
Socketserver的源码分析
- tiny web服务器源码分析
tiny web服务器源码分析 正如csapp书中所记,在短短250行代码中,它结合了许多我们已经学习到的思想,如进程控制,unix I/O,套接字接口和HTTP.虽然它缺乏一个实际服务器所具备的功能 ...
随机推荐
- kNN进邻算法
一.算法概述 (1)采用测量不同特征值之间的距离方法进行分类 优点: 精度高.对异常值不敏感.无数据输入假定. 缺点: 计算复杂度高.空间复杂度高. (2)KNN模型的三个要素 kNN算法模型实际上就 ...
- 齐治堡垒机ShtermClient-2.1.1命令执行漏洞(CNVD-2019-09593)分析
一.基本信息 参考:https://www.cnvd.org.cn/flaw/show/1559039 补丁信息:该漏洞的修复补丁已于2019年4月1日发布.如果客户尚未修复该补丁,可联系齐治科技的技 ...
- 【VS开发】C语言遍历文件夹
// StdCFIndAllFiles.cpp : 定义控制台应用程序的入口点. // #include "stdafx.h" #include <iostream> ...
- 【图像处理】DVR H.264视频编码基本知识
视频编码技术基本是由ISO/IEC制定的MPEG-x和ITU-T制定的H.26x两大系列视频编码国际标准的推出.从H.261视频编码建议,到 H.262/3.MPEG-1/2/4等都有一个共同的不断追 ...
- Linux Pycharm 添加图标到root账户桌面
1. 去官网下载pycharm程序 2. 解压缩下载到的tar包 3. 在/usr/share/applications目录下新建一个pycharm.desktop, 写入内容如下, 注意红色字体需要 ...
- [POI2011]ROT-Tree Rotations 题解
题面 这道题咋看都是无法从dp入手,那么就从数据结构入手!: 首先你要会权值线段树和线段树合并. 然后你要知道: 对于任意一个节点,交换左右子树对当前节点和前面的所有节点没有影响. 因为这是前序遍历: ...
- git链接远程库
码云版本库使用流程 生成公钥 ssh-keygen -t rsa -c "码云申请邮箱" 添加公钥到本地 ssh-agent bash ssh-add ~/.ssh/id_rsa ...
- Vue 实例之事件 操作样式 (文本、事件、属性、表单、条件)指令
Vue 可以独立完成前后端分离式web项目的JavaScript框架 三大主流框架之一: Angular React Vue 先进的前端设计模式:MVVM 可以完全脱离服务器端,以前端代码复用的方式渲 ...
- python中property属性的介绍及其应用
Python的property属性的功能是:property属性内部进行一系列的逻辑计算,最终将计算结果返回. 使用property修饰的实例方法被调用时,可以把它当做实例属性一样 property的 ...
- LKM rootkit:Reptile学习
简介 Reptile是github上一个很火的linux lkm rootkit,最近学习了一些linux rootkit的内容,在这里记录一下. 主要是分析reptile的实现 Reptile的使用 ...