Requests模块

1、模块说明

  Requests 是使用 Apache2 Licensed 许可证的 HTTP 库。用 Python 编写,真正的为人类着想。

  Python 标准库中的 urllib2 模块提供了你所需要的大多数 HTTP 功能,但是它的 API 太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务。

  在Python的世界里,事情不应该这么麻烦。

  Requests 使用的是 urllib3,因此继承了它的所有特性。Requests 支持 HTTP 连接保持和连接池,支持使用 cookie 保持会话,支持文件上传,支持自动确定响应内容的编码,支持国际化的 URL 和 POST 数据自动编码。现代、国际化、人性化。

(以上转自Requests官方文档)

2、模块安装

  1. pip install requests

尝试在IDE中import requests,如果没有报错,那么安装成功。

3、所有请求类型

  1. #HTTP请求类型
  2. #get类型
  3. r = requests.get('http://127.0.0.1:8000/timeline.json')
  4. #post类型
  5. r = requests.post("http://127.0.0.1:8000/post")
  6. #put类型
  7. r = requests.put("http://127.0.0.1:8000/put")
  8. #delete类型
  9. r = requests.delete("http://127.0.0.1:8000/delete")
  10. #head类型
  11. r = requests.head("http://127.0.0.1:8000/head")
  12. #options类型
  13. r = requests.options("http://127.0.0.1:8000/get")

  

4、Get请求

注:get请求中只包含请求头信息,没有请求体

  1. from django.views import View
  2.  
  3. class Index(View):
  4.  
  5. def get(self, request):
  6.  
  7. auth_key = request.META.get('HTTP_AUTH_KEY')
  8. print(auth_key)
  9. return HttpResponse('requests模块测试')
  10.  
  11. # HTTP_AUTH_KEY'(76981496) = {str}''
  12.  
  13. web端.py

web端.py

发送请求:

  1. import requests
  2.  
  3. response = requests.get('http://127.0.0.1:8000/index/') #发送get请求
  4.  
  5. print(response.text) #字符串类型
  6. print(response.content) #bytes类型
  7.  
  8. # requests模块测试
  9. # b'requests\xe6\xa8\xa1\xe5\x9d\x97\xe6\xb5\x8b\xe8\xaf\x95'

传递参数:

  1. import requests
  2. payload = {'keyword': '299095cc', 'salecityid': '2'}
  3. response = requests.get('http://127.0.0.1:8000/index/',params=payload) # 发送get请求,等同于下面访问路径
  4.  
  5. print(response.url) # 打印请求路径
  6.  
  7. # http://127.0.0.1:8000/index/?salecityid=2&keyword=299095cc

传递请求头:

  1. import requests
  2. auth_key = "299095cc"
  3. response = requests.get('http://127.0.0.1:8000/index/',
  4. headers={'auth-key':auth_key}) # headers里的key值不能包含_

添加浏览器类型:

  1. #定制请求头
  2. url = 'http://m.ctrip.com'
  3. headers = {'User-Agent' : 'Mozilla/5.0 (Linux; Android 4.2.1; en-us; Nexus 4 Build/JOP40D) AppleWebKit/535.19 (KHTML, like Gecko) Chrome/18.0.1025.166 Mobile Safari/535.19'}
  4. r = requests.post(url, headers=headers)
  5. print r.request.headers

网页编码:

  1. #获取/修改网页编码
  2. r = requests.get('https://github.com/timeline.json')
  3. print r.encoding
  4. r.encoding = 'utf-8'

json数据转换: 

  1. #json处理
  2. r = requests.get('https://github.com/timeline.json')
  3. print r.json() #需要先import json

状态响应: 

  1. #响应状态码
  2. r = requests.get('http://m.ctrip.com')
  3. print r.status_code
  4.  
  5. #响应头
  6. r = requests.get('http://m.ctrip.com')
  7. print r.headers
  8. print r.headers['Content-Type']
  9. print r.headers.get('content-type') #访问响应头部分内容的两种方式

获取和携带cookie:

  1. # 获取
  2. url = 'http://example.com/some/cookie/setting/url'
  3. r = requests.get(url)
  4. r.cookies['example_cookie_name'] #读取cookies

  5. # 携带
  6. url = 'http://m.ctrip.com/cookies'
  7. cookies = dict(cookies_are='working')
  8. r = requests.get(url, cookies=cookies) #发送cookies

超时时间:

  1. #设置超时时间
  2. r = requests.get('http://m.ctrip.com', timeout=(5,1)) # 前面是连接时间,后面是数据传送时间

访问代理:

  1. #设置访问代理
  2. proxies = {
  3. "http": "http://10.10.10.10:8888",
  4. "https": "http://10.10.10.100:4444",
  5. }
  6. r = requests.get('http://m.ctrip.com', proxies=proxies)

存储图片:

  1. import requests
  2. from bs4 import BeautifulSoup
  3.  
  4. r = requests.get("http://www.pythonscraping.com")
  5. bs = BeautifulSoup(r.text,'html.parser')
  6. image = bs.find("a", {"id": "logo"}).find("img")["src"]
  7.  
  8. ir = requests.get(image)
  9. if ir.status_code == 200:
  10. open('logo.jpg', 'wb').write(ir.content)

 

5、Post请求

注:post请求包含请求头,请求体,下面只写get中不存在的参数

用户认证:

  1. # 认证,form表单的提交
  2. url = 'http://m.ctrip.com'
  3. data= {'username': 'lzl','password':'123456'}
  4. r = requests.post(url, data=data)
  5.  
  6. #复杂post请求
  7. url = 'http://m.ctrip.com'
  8. payload = {'some': 'data'}
  9. r = requests.post(url, data=json.dumps(payload)) #如果传递的payload是string而不是dict,需要先调用dumps方法格式化一下

发送文件:

  1. #post多部分编码文件
  2. url = 'http://m.ctrip.com'
  3. files = {'file': open('report.xls', 'rb')}
  4. r = requests.post(url, files=files)

  

 6、中文乱码

  1. reptext = response.content.decode('gbk')

 

7、发送https请求

  1. import json
  2. import requests
  3. from requests.packages.urllib3.exceptions import InsecureRequestWarning
  4. requests.packages.urllib3.disable_warnings(InsecureRequestWarning)
  5. url = 'https://192.168.1.12:8038/v1/call/DailbackCallBack_XL.ashx?action=NoticeCall_XL_176_KeyPress&spid=176'
  6. data = {'requestid': u'2017110000000127', 'clid': u'057128214997', 'stime': '2017-11-22 14:53:17',
  7. 'ctime': '2017-11-22 14:52:57', 'accountno': u'800100', 'keypress': u'123', 'phonenum': u'18515142614',
  8. 'etime': '2017-11-22 14:53:23', 'recording': '', 'sn': u'54587192661872',
  9. 'result': 0}
  10. response = requests.post(url=url,data=json.dumps(data),verify=False)
  11. print(response.text)

  

 

Python开发【模块】:Requests(一)的更多相关文章

  1. Python第三方模块--requests简单使用

    1.requests简介 requests是什么?python语言编写的,基于urllib的第三方模块 与urllib有什么关系?urllib是python的内置模块,比urllib更加简洁和方便使用 ...

  2. python开发模块基础:re正则

    一,re模块的用法 #findall #直接返回一个列表 #正常的正则表达式 #但是只会把分组里的显示出来#search #返回一个对象 .group()#match #返回一个对象 .group() ...

  3. python开发模块基础:异常处理&hashlib&logging&configparser

    一,异常处理 # 异常处理代码 try: f = open('file', 'w') except ValueError: print('请输入一个数字') except Exception as e ...

  4. python开发模块基础:os&sys

    一,os模块 os模块是与操作系统交互的一个接口 #!/usr/bin/env python #_*_coding:utf-8_*_ ''' os.walk() 显示目录下所有文件和子目录以元祖的形式 ...

  5. python开发模块基础:序列化模块json,pickle,shelve

    一,为什么要序列化 # 将原本的字典.列表等内容转换成一个字符串的过程就叫做序列化'''比如,我们在python代码中计算的一个数据需要给另外一段程序使用,那我们怎么给?现在我们能想到的方法就是存在文 ...

  6. python开发模块基础:time&random

    一,time模块 和时间有关系的我们就要用到时间模块.在使用模块之前,应该首先导入这个模块 常用方法1.(线程)推迟指定的时间运行.单位为秒. time.sleep(1) #括号内为整数 2.获取当前 ...

  7. python开发模块基础:collections模块&paramiko模块

    一,collections模块 在内置数据类型(dict.list.set.tuple)的基础上,collections模块还提供了几个额外的数据类型:Counter.deque.defaultdic ...

  8. python开发模块基础:正则表达式

    一,正则表达式 1.字符组:[0-9][a-z][A-Z] 在同一个位置可能出现的各种字符组成了一个字符组,在正则表达式中用[]表示字符分为很多类,比如数字.字母.标点等等.假如你现在要求一个位置&q ...

  9. Python开发——目录

    Python基础 Python开发——解释器安装 Python开发——基础 Python开发——变量 Python开发——[选择]语句 Python开发——[循环]语句 Python开发——数据类型[ ...

  10. Python开发【第六篇】:模块

    模块,用一砣代码实现了某个功能的代码集合. 类似于函数式编程和面向过程编程,函数式编程则完成一个功能,其他代码用来调用即可,提供了代码的重用性和代码间的耦合.而对于一个复杂的功能来,可能需要多个函数才 ...

随机推荐

  1. R语言低级绘图函数-abline

    abline 函数的作用是在一张图表上添加直线, 可以是一条斜线,通过x或y轴的交点和斜率来确定位置:也可以是一条水平或者垂直的线,只需要指定与x轴或y轴交点的位置就可以了 常见用法: 1)添加直线 ...

  2. require() 方法讲解

    require.config({ paths:{ "jquery":"jquery.min", "underscore":"und ...

  3. php 用命令行导出和导入MySQL数据库

    命令行导出数据库:1,进入MySQL目录下的bin文件夹:cd MySQL中到bin文件夹的目录如我输入的命令行:cd C:\Program Files\MySQL\MySQL Server 4.1\ ...

  4. 给嵌入式ARM+Linux的初学者

    http://blog.csdn.net/lucykingljj/article/details/40619671

  5. Python 练习题:统计系统剩余内存

    #!/usr/bin/env python #-*- coding:utf-8 -*- ''' 统计系统内存信息 ''' with open('/proc/meminfo') as fd: for l ...

  6. Python3 抓取豆瓣电影Top250

    利用 requests 抓取豆瓣电影 Top 250: import re import requests def main(url): global num headers = {"Use ...

  7. Windows+IIS结合LVS+Keepalived是实现Linux负载均衡软件

    在Discuz!NT的最新版本(企业版)中,支持目前主流LINUX平台上的负载均衡解决方案,比如NGINX,HAPROXY,LVS等.本文与其说是解决方案,倒不如说是介绍如何搭建Discuz!NT负载 ...

  8. JDK1.8在LINUX下安装步骤

    JDK1.8在LINUX下安装步骤: 在/usr/lib/目录下新建jvm文件夹,如果已有jvm文件夹,则将之前的JDK版本删除,即在jvm目录下执行命令:rm –rf * 将JDK文件jdk-8u4 ...

  9. 使用boch仿真器在x86 PC平台上搭建Linux0.11系统环境(windows下)

    当你有机会来到这页面时   十有八九是遇到这样一个问题    执行配置文件bochsrc_fd.bxrc时出现找不到 ips的情况! 版本原因吧   将boch版本换成2.4的问题就迎刃而解了~ 简单 ...

  10. 微信Tinker的一切都在这里,包括源码(一)

    版权声明:本文由张绍文原创文章,转载请注明出处: 文章原文链接:https://www.qcloud.com/community/article/101 来源:腾云阁 https://www.qclo ...