一 . 模拟登陆案例(识别验证码)  1 . 打码平台 - 云打码 : www.yundama.com  使用步骤 : - 注册两个账户,普通用户和开发者用户 : - 登陆 普通用户查看余额 登陆开发者用户 : 创建一个软件: 我的软件 -> 创建软件 下载示例代码: 开发者中心 -> 下载最新云打码DLL -> PythonHTTP示例下载 - 下载后解压缩,如下 :                              import http.client, mimetypes,…

需求文档的定制 糗事百科的段子内容和作者(xpath的管道符)名称进行爬取,然后存储到mysql中or文本 http://sc.chinaz.com/jianli/free.html爬取简历模板 HTTPConnectionPool(host:XX)Max retries exceeded with url. 原因: 1.当你在短时间内发起高频请求的时候,http的连接池中的连接资源被耗尽. Connection:keep-alive 2.ip被封 解决: Connection:'close'…

1.Executor 线程池顶级接口.定义方法,void execute(Runnable).方法是用于处理任务的一个服务方法.调用者提供Runnable 接口的实现,线程池通过线程执行这个 Runnable.服务方法无返回值的.是 Runnable 接口中的 run 方法无返回值. 常用方法 -voidexecute(Runnable) 作用是: 启动线程任务的.示例如下: /** * 线程池 * Executor - 线程池底层处理机制. * 在使用线程池的时候,底层如何调用线程中的逻辑.…

目录 requests模拟登陆 Selenium自动化测试登陆 环境:python3.7 windows requests模拟登陆 我们登陆DVWA的时候,看似只有一步:访问网站,输入用户名和密码,登陆成功则跳转到新页面. 其实这中间分了三步. 1.访问网站的瞬间,浏览器会先向网站的登录页面发送GET请求,然后服务器会返回带有 token 和 cookies 的信息给浏览器 2.浏览器收到服务器返回的信息后,从中提取token和cookie.    当我们输入用户名和密码登录页面的时候,这次请求…

requests模块的其他用法 #通常我们在发送请求时都需要带上请求头,请求头是将自身伪装成浏览器的关键,常见的有用的请求头如下 Host Referer #大型网站通常都会根据该参数判断请求的来源 User-Agent #客户端 Cookie #Cookie信息虽然包含在请求头里,但requests模块有单独的参数来处理他,headers={}内就不要放它了 cookies import requests respone=requests.get('http://www.jianshu.com…

前言 在文章开始之前,询问一下大家平时工作中后端处理批量任务(耗时任务)的时候,前端是如何告知用户任务的执行情况的? 楼主对这个问题想了下,决定使用websokect将这一过程展现给用户. 于是就有了这篇文章,跟大家一起学习. WebSocket简单介绍 WebSocket是HTML5开始提供的一种浏览器与服务器间进行全双工通讯的网络技术. WebSocket通信协议于2011年被IETF定为标准 RFC 6455,WebSocketAPI被W3C定为标准. 在WebSocket API中,浏览…

参考文章: [1]创建线程池 http://sunnylocus.iteye.com/blog/223327?page=2#comments [2]线程组ThreadGroup  http://hubingforever.blog.163.com/blog/static/1710405792010913191791/ 一.为什么要用线程池: 1)减少了创建和销毁线程的次数,每个工作线程都可以被重复利用,可执行多个任务 2)可以根据系统的承受能力,调整线程池中工作线程的数目,防止因为消耗过多的内存…

.原文:https://blog.csdn.net/u011677147/article/details/80271174 拓展: https://github.com/jwpttcg66/GameThreadPool/blob/85bb392151324e68addec355d85d9ce22b4ab1e2/src/test/java/com/snowcattle/game/thread/ThreadPoolTest.java游戏中常用的线程池,顺序队列和非顺序队列 @RestControll…

模拟登陆百度,需要依赖于selenium 模块,调用浏览器,执行python命令 先来说一下这个selenium模块啦...... 本文参考内容来自 Selenium官网 SeleniumPython文档 安装 首先安装 Selenium   1 pip install selenium 或者下载源码 下载源码 然后解压后运行下面的命令进行安装   1 python setup.py install 安装好了之后我们便开始探索抓取方法了. 快速开始 初步体验 我们先来一个小例子感受一下 Sele…

Selenium模拟登陆百度贴吧 from selenium import webdriver from time import sleep from selenium.webdriver.common.desired_capabilities import DesiredCapabilities # dcap = dict(DesiredCapabilities.PHANTOMJS) # dcap["phantomjs.page.settings.userAgent"] = ( #…