Python 高级网络操作 - Python Advanced Network Operations
Python 高级网络操作 - Python Advanced Network Operations
Half Open Socket,
一个单向的 socket 被称为 half open socket, 即数据只能在一个方向上传输.
Half Open Socket 是通过在 socket 对象上调用 shutdown() 方法得到.
shutdown 接收一个 numeric 类型的参数,
0 - 表示调用之后禁止读
1 - 表示调用之后禁止写
2 - 表示调用之后禁止读和写
一旦关闭了某一个方向(读/写), socket 就不能再在该方向上被重新打开了.
shutdown()是累计的, 也就是调用 shutdown(0) 再调用 shutdown(1) 跟
直接调用一个 shutdown(2) 效果是一样的. Half Open Socket 通常被应用在一下儿 3 种情形中,
1, 想要确保所有写好的数据都已经被传送出去.
调用 shutdown()的时候, 只有在缓存里面的数据都被成功发出去后方法才会有返回.
2, 用来 debug, 捕获潜在的异常/错误.
Half Open Socket 是捕获试图写一个不可写的 socket, 或者读一个不可读
的 socket 的异常的好方法.
3, 在程序是用了 fork() 或 多线程的时候, 用来防止其他进程/线程的某些操作. socket 超时 - socket timeout
settimeout(seconds)
对一个 socket 对象调用 settimeout(secs) 方法后, 如果经过在 sces 秒之内什么都
没有发生(读/写), 则会产生一个 socket.timeout 异常, 链接机会断开,
例子,
... ...
sock, addr = S.accept()
sock.settimeout(9)
... ... 结束标识,
通过 socket 传输不确定长度的字符串的会遇到一个问题 - 不知道什么时候数据发送结束.
通常,有两种方法可以解决这个问题,
1, 通过指定字符串结束标识符(尾)
这个标识符通常是一个 NULL 字符(python - '\0') 或 newline 字符(python - '\n')
需要注意的问题是需要保证设定的结束符在所传输的内容中的'唯一'性.
2, 通过指定字符串长度指示符(首)
先发发送一个数字用来表示数据的长度, 接受方会根据这个数字长度的数据.
在网络上发送整形数据的时候,通常有一下儿两种选择,
a, 发送 ASCII 码(接收方收到后需要解码)
b, 直接发送 二进制 数, 一般位长是 16 或 32 位.
为了解决不同平台的二进制数据的编码方法不同的问题, 一种标准的二进制数据
表示法 - 网络字节顺序( Network Byte Order )被采纳. 在发送一个二进制数之前,
该二进制数被转换成 Network Byte Order; 接收方收到后, 在使用该数据之前做
'反向转换'. 广播数据,
广播数据不能用 TCP 实现, 他多数是用 UDP 来实现的.
当接受方收到一个广播信息后, 系统内核会检查目的地的端口号信息. 如果系统上有一个在 listen 监听该端口
号的进程,则信息会被发送给该进程, 否者信息会被忽略掉.
例子,
发送方,
import socket
S = socket.socket(socket.AF_INET, socket.SOCK_DGRAM) # UDP
S.setsockopt(socket.SOL_SOCKET, socket.SO_BROADCAST, 1) # 广播 broadcast
S.sendto("Hi there!",('<broadcast>', 12345)) # host = '<broadcast>' while 1:
try:
data, addr = S.recvfrom(1024)
print("%s is connecting" % clientsocket.getpeername())
except (KeyboardInterrupt,SystemExit) as e:
print(e)
raise
if not len(data):
break
print("Received message : %s from : %s",(data, addr)) 接受方,
import socket S = socket.socket(socket.AF_INET, socket.SOCK_DGRAM) # UDP
S.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1) # 链接关闭后,端口立即可用
S.setsockopt(socket.SOL_SOCKET, socket.SO_BROADCAST, 1) # 广播 broadcast
S.bind(('', 12345)) while 1:
try:
mes, addr = S.recvfrom(8192)
print("Got message : %s from : %s" % (mes, addr))
S.sendto("ACK", addr) # 回复不是广播
except (KeyboardInterrupt, SystemExit) as e:
print(e)
raise 通过 poll() 或 select() 实现事件通知,
通常, socket 上的 I/O 是阻塞的, 当一个操作(读/写)未结束,程序会阻塞.
在 nonblocking 模式中, 如果在没有完全准备好的 socket 对象调用 send() 或 recv() 方法
会触发 socket.error 异常. 在这种情况下, 就需要在调用 recv() 之前检查一下儿, socket 上
是不是有可以接受的 data. select() 和 poll() 就是满足检查需求的两个标准工具. 他们可以使
系统在某个 socket 上有事件发生的时候通知程序发生了什么, 从而在程序中进行有针对性的操作.
select() 接口是早起被普遍使用的, 但是在需要同时观察多个 socket 的事件的时候, 会变得很慢.
Windows 系统不支持 poll(), 必须使用 select(). 例子,
poll()
import socket, select
try:
S = socket.socket(socket.AF_INET,socket.SOCK_STREAM)
except socket.error as e:
print("Error at creating socket : %s" % e) try:
s.connect(("www.zzyzz.top", 80))
except socket.gaierror as e:
print("Address related error : %s" % e)
except socket.error as e:
print("Connection error : %s" % e)
P = select.poll()
P.register(S.fileno(), select.POLLIN | select.POLLERR | select.POLLHUP)
# POLLIN 普通或优先级带数据可读
# POLLERR 发生错误
# POLLHUP 对方描述符挂起
# POLLRDNORM 普通数据可读
# POLLRDBAND 优先级带数据可读
# POLLPRI 高优先级数据可读
# POLLOUT 普通数据可写
# POLLWRNORM 普通数据可写
# POLLWRBAND 优先级带数据可写
# POLLNVAL 描述字不是一个打开的文件 while 1:
res = P.poll(100) # poll 间隔 100 毫秒
if len(res):
if res[0][1] == select.POLLIN:
data = S.recv(1024)
if not len(data):
print("Connection closed")
break
print("Received data : %s" % data)
else:
print("Errors occurred")
break select() 来解决 I/O 阻塞
select(rlist, wlist, elist[, timeout])
rlist - '读' 的文件对象列表
wlist - '写' 的文件对象列表
elist - '错误' 的文件对象列表
timeout - 可选参数, 接收浮点类型, 指明超时的时间(秒) select() 方法的调用返回 3 个tuple, 每一个 tuple 都是一个对象列表, 顺序对应参数顺序. import socket, select
try:
S = socket.socket(socket.AF_INET,socket.SOCK_STREAM)
except socket.error as e:
print("Error at creating socket : %s" % e) try:
s.connect(("www.zzyzz.top", 80))
except socket.gaierror as e:
print("Address related error : %s" % e)
except socket.error as e:
print("Connection error : %s" % e) while 1:
infds, outfds, errfds = select.select([S],[],[S],0.05)
if len(infds):
data = S.recv(1024)
if not len(data):
print("Connection closed")
break
print("Received data : %s" % data)
if len(errfds):
print("Errors occurred")
break
Python 高级网络操作 - Python Advanced Network Operations的更多相关文章
- python高级之操作数据库
python高级之操作数据库 本节内容 pymysql介绍及安装 使用pymysql执行sql 获取新建数据自增ID fetch数据类型设置 1.pymysql介绍及安装 在python2中连接数据库 ...
- 第九篇:python高级之操作数据库
python高级之操作数据库 python高级之操作数据库 本节内容 pymysql介绍及安装 使用pymysql执行sql 获取新建数据自增ID fetch数据类型设置 1.pymysql介绍及 ...
- Python高级网络编程系列之第一篇
在上一篇中我们简单的说了一下Python中网络编程的基础知识(相关API就不解释了),其中还有什么细节的知识点没有进行说明,如什么是TCP/IP协议有几种状态,什么是TCP三次握手,什么是TCP四次握 ...
- Python高级进阶(一)Python框架之Django入门
传说中的Django Django由来 Django是一个开放源代码的Web应用框架,由Python写成.采用了MVC的框架模式,即模型M,视图V和控制器C.它最初是被开发来用于管理劳伦斯出版集团旗下 ...
- Python高级网络编程系列之第三篇
在高级篇二中,我们讲解了5中常用的IO模型,理解这些常用的IO模型,对于编写服务器程序有很大的帮助,可以提高我们的并发速度!因为在网络中通信主要的部分就是IO操作.在这一篇当中我们会重点讲解在第二篇当 ...
- Python高级网络编程系列之第二篇
在上一篇中,我们深入探讨了TCP/IP协议的11种状态,理解这些状态对我们编写服务器的时候有很大的帮助,但一般写服务器都是使用C/Java语言,因为这些语言对高并发的支持特别好.我们写的这些简单的服务 ...
- Python高级网络编程系列之基础篇
一.Socket简介 1.不同电脑上的进程如何通信? 进程间通信的首要问题是如何找到目标进程,也就是操作系统是如何唯一标识一个进程的! 在一台电脑上是只通过进程号PID,但在网络中是行不通的,因为每台 ...
- Python高级网络编程系列之终极篇---自己实现一个Web框架
通过前面几个小节的学习,现在我们想要把之前学到的知识点给串联起来,实现一个很小型的Web框架.虽然很小,但是用到的知识点都是比较多的.如Socket编程,装饰器传参在实际项目中如何使用.通过这一节的学 ...
- Python高级特性:Python迭代、生成器、列表生成式
迭代 给定一个list或tuple,我们可以通过for循环来遍历这个list或tuple,这种遍历称为迭代(Iteration). 在java和C语言中,迭代是通过循环list的下标来完成的,Pyth ...
随机推荐
- Keystone V3 API Examples
There are few things more useful than a set of examples when starting to work with a new API. Here a ...
- Spring循环依赖的解决
## Spring循环依赖的解决 ### 什么是循环依赖 循环依赖,是依赖关系形成了一个圆环.比如:A对象有一个属性B,那么这时候我们称之为A依赖B,如果这时候B对象里面有一个属性A.那么这时候A和B ...
- SpringBoot 2.x 开发案例之 Shiro 整合 Redis
前言 前段时间做了一个图床的小项目,安全框架使用的是Shiro.为了使用户7x24小时访问,决定把项目由单机升级为集群部署架构.但是安全框架shiro只有单机存储的SessionDao,尽管Shrio ...
- 越来越清晰的TFRecord处理图片的步骤
# 首先是模块的导入 """ os模块是处理文件夹用的 PIL模块是用来处理图片的 """ import tensorflow as tf ...
- 毒瘤养成记1: 如何卡hash
各位毒瘤大家好, 最近模拟赛考了一道trie+主席树好题, 但大家都用hash水过了这道题(包括我), 为了测试一下新搭建的HEAT OJ的hack功能, 我将继续扮演毒瘤的角色, 用毒瘤的艺术形象努 ...
- python接口测试,mock模块基本使用介绍
mock简介 py3已将mock集成到unittest库中 为的就是更好的进行单元测试 简单理解,模拟接口返回参数 通俗易懂,直接修改接口返回参数的值 mock作用 解决依赖问题,达到解耦作用 当我们 ...
- [bzoj2815] [洛谷P2597] [ZJOI2012] 灾难
Description 阿米巴是小强的好朋友. 阿米巴和小强在草原上捉蚂蚱.小强突然想,如果蚂蚱被他们捉灭绝了,那么吃蚂蚱的小鸟就会饿死,而捕食小鸟的猛禽也会跟着灭绝,从而引发一系列的生态灾难. 学过 ...
- 「 从0到1学习微服务SpringCloud 」05服务消费者Fegin
系列文章(更新ing): 「 从0到1学习微服务SpringCloud 」01 一起来学呀! 「 从0到1学习微服务SpringCloud 」02 Eureka服务注册与发现 「 从0到1学习微服务S ...
- 【java面试】集合类篇
java中主要的类集合接口如下 Collection ├List │├LinkedList │├ArrayList │└Vector │ └Stack └Set Map ├Hashtable ├Has ...
- 工作笔记-- 源码安装nginx
源码安装nginx 1.安装nginx的依赖包 [root@localhost ~]# yum -y install gcc gcc-c++ openssl openssl-devel pcre pc ...