【python自动化开发-[第二十五天]-scrapy进阶与flask使用】的更多相关文章

python自动化开发-[第二十五天]-scrapy进阶与flask使用

今日内容概要 1.cookie操作 2.pipeline 3.中间件 4.扩展 5.自定义命令 6.scrapy-redis 7.flask使用 - 路由系统 - 视图 - 模版 - message(闪现) - 中间件 - session - 蓝图 - 安装第三方插件 Scrapy - 创建project - 创建爬虫 - 编写 - 类 - start_urls = ['http://www.xxx.com'] - def parse(self,response): yield Item对象 y…

python自动化开发-[第二十四天]-高性能相关与初识scrapy

今日内容概要 1.高性能相关 2.scrapy初识 上节回顾: 1. Http协议 Http协议:GET / http1.1/r/n...../r/r/r/na=1 TCP协议:sendall("GET / http1.1/r/n...../r/r/r/na=1") 2. 请求体 GET: GET / http1.1/r/n...../r/r/r/n POST: POST / http1.1/r/n...../r/r/r/na=1&b=2 POST / http1.1/r/n.…

python自动化开发-[第十五天]-jquery

今日概要 1.javascript补充 2.jquery 1.javascript-DOM绑定事件 1.事件类型 onclick 当用户点击某个对象时调用的事件句柄. ondblclick 当用户双击某个对象时调用的事件句柄. onfocus 元素获得焦点. 练习:输入框 onblur 元素失去焦点. 应用场景:用于表单验证,用户离开某个输入框时,代表已经输入完了,我们可以对它进行验证. onchange 域的内容被改变. 应用场景:通常用于表单元素,当元素内容被改变时触发.(三级联动) onk…

Appium+python自动化（二十五）- 那些让人抓耳挠腮、揪头发和掉头发的事 - 获取控件ID（超详解）

简介 在前边的第二十二篇文章里,已经分享了通过获取控件的坐标点来获取点击事件的所需要的点击位置,那么还有没有其他方法来获取控件点击事件所需要的点击位置呢?答案是:Yes!因为在不同的大小屏幕的手机上获取控件的坐标点,不是一样的,而是有变化的,因此在不同的手机机型上,我们可能都需要重新获取坐标点,这么操作起来,如果操作控件特别的多,那么获取控件的坐标点就会显得特别的繁琐.因此我们可以通过获取控件的ID来避免获取控件坐标点的这种弊端. 通过控件ID实现自动化脚本的运行,就性能而言,会比控件坐标的实现…

python自动化开发-[第十天]-线程、协程、socketserver

今日概要 1.线程 2.协程 3.socketserver 4.基于udp的socket(见第八节) 一.线程 1.threading模块 第一种方法:实例化 import threading import time #第一种方法实例化 def sayhi(num): print('running on num %s' %(num)) time.sleep(3) if __name__ == '__main__': t1 = threading.Thread(target=sayhi,args=…

python自动化开发-[第二天]-基础数据类型与编码(续)

今日简介: - 编码 - 进制转换 - 初识对象 - 基本的数据类型 - 整数 - 布尔值 - 字符串 - 列表 - 元祖 - 字典 - 集合 - range/enumcate 一.编码 encode和decode 编码就是将字符串转换成字节码,涉及到字符串的内部表示. 解码就是将字节码转换为字符串,将比特位显示成字符. file = '文本' file.decode(encoding="utf-8", errors="strict") file.encode(en…

python自动化开发-[第二十三天]-初识爬虫

今日概要: 1.爬汽车之家的新闻资讯 2.爬github和chouti 3.requests和beautifulsoup 4.轮询和长轮询 5.django request.POST和request.body 一.HTTP知识扫盲 1.http的get请求 是没有请求体,所有的参数都放在请求头的url里 2.http的post请求 将请求内容放到请求体里 3.http = 请求头+请求体 响应头+响应体 4.http是无状态请求,一个请求,一次响应就会结束 二.爬取汽车之家的新闻页 #!/usr…

python自动化开发-[第十六天]-bootstrap和django

今日概要: 1.bootstrap使用 2.栅格系统 3.orm简介 4.路由系统 5.mvc和mtv模式 6.django框架 1.bootstrap的引用方式 1.Bootstrap 专门构建了免费的 CDN 加速服务,访问速度更快.加速效果更明显.没有速度和带宽限制.永久免费 <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <me…

python自动化开发-[第十四天]-javascript(续)

今日概要: 1.数据类型 2.函数function 3.BOM 4.DOM 1.运算符 算术运算符: + - * / % ++ -- 比较运算符: > >= < <= != == === !== 逻辑运算符: && || ! 赋值运算符: = += -= *= /= 字符串运算符: + 连接,两边操作数有一个或两个是字符串就做连接运算 == 和 === 的区别? ==为字符串相等,数据类型可以不一样,===为内容相等,同时数据类型一样 1.算术运算符 注意1: 自加…

Python学习笔记第二十五周（Django补充）

1.render_to_reponse() 不同于render,render_to_response()不用包含request,直接写template中文件 2.locals() 如果views文件中的函数里变量过多的话,可以在render或render_to_response()里面直接增加render(request,'index.html',locals())这样在前端界面渲染的时候可以直接写变量名 locals()的缺点是不想传递过去的变量也传递过去了 3.JS中的方法: a: hove…