先按照百度的办法,去“C:\Users\<你的电脑名>\AppData\Local\Temp\”下找类似“OWPFD24.tmp”的文件夹,结果发现并没有这个文件夹 , 没办法,自己硬着头皮又下了一个project,发现还是同样的报错安装找不到文件.最后,我把默认安装路径改到D盘,发现可以装好,这太坑了...,记下来吧.…

很多人在注册域名的时候不明白域名后缀的含义,在这里就介绍两种最为常用的域名,介绍下他们的区别以及适用的范围.需要先查询是否被注册,我们经常去的就是西部数据和万网,查询并注册未被注册的域名,一般无论是什么域名 首年都为50元之下,第二年可能会加几元,   从国家范围看:.com域名是国际域名,全球通用顶级域名:而.cn是国内域名,此域名由中国互联网络管理中心"(CNNIC)发放与注册登记,美国的则是.us.   从域名顶级类别看:.com 是国际顶级域名:而.cn 是国家级顶级域名   从使用角度…

首先,本人刚刚开始开源代码精读,写的不对的地方,大家轻拍,一起进步.本文是对Tinyhttpd的一次精读,大家每天都在用着http服务,很多人也一直活跃在上层,使用IIS.Apache等,大家是否想看看http服务器大概是怎么运作的,通过一个500多行的源码加上完整的注释,和大家逛一逛http服务器.Tinyhttpd真的非常适合阅读尤其是刚入门的,清晰的代码,简单的makefile...其实有很多分析tinyghttpd的,这边抱着人家写的是人家,自己写的才是自己的态度,写的尽量详细,尽量简单…

设置进程池爬取拉钩网: # coding = utf- import json import pymongo import pandas as pd import requests from lxml import etree import time from multiprocessing import Pool # 设置mongodb client = pymongo.MongoClient('localhost') db = client['lagou'] # 查询的岗位名称 POSITI…

本文介绍两种爬取方式: 1.正则表达式 2.bs4解析Html 以下为正则表达式爬虫,面向对象封装后的代码如下: import urllib.request # 用于下载图片 import os import requests # 发送http请求 import re # 正则表达式匹配 class GetJpg(object): def __init__(self, start_urls): self.start_urls = start_urls def get_response(self,…

抓取地址:http://maoyan.com/board/4 分析url分页规则:http://maoyan.com/board/4?offset=0 其中offset参数值为0到90 用到的库: PyQuery:html解析器,语法类似jquery fake_useragent;用于伪造头部浏览器信息,防爬虫屏蔽相关代码: import requests from requests.exceptions import RequestException from pyquery import P…

# coding:utf-8 import requests import re import time proxies = { "http": "http://124.131.242.155:80" } headers = {'content-type': 'application/json', 'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Ge…

原因:安装时为了学习方便选择中文安装,其字符编码相关配置如下(在/etc/default/locale中) LANG="Zh_CN.UTF-8 "LANGUAGE="zh.CN:zh" 解决:通过vi将以上内容改成: LANG="en_US.UTF-8 "LANGUAGE="en_US:en" vi编辑方法:  vi 路径 文件名  输入命令:vi /etc/default/locale .此时为查看模式,可以用向上向下键翻页…

# -*- coding: utf-8 -*-import osimport urllibimport urllib2from bs4 import BeautifulSoup headers = { 'Accept': 'text / html, application / xhtml + xml, application / xml;q = 0.9, image / webp, image / apng, * / *;q = 0.8', 'Accept - Language':'zh - C…

—————————————HTTP1.0/HTTP1.1—————————————— 建立连接方面 HTTP/1.0 每次请求都需要建立新的TCP连接,连接不能复用.HTTP/1.1 新的请求可以在上次请求建立的TCP连接之上发送,连接可以复用.优点是减少重复进行TCP三次握手的开销,提高效率.注意:在同一个TCP连接中,新的请求需要等上次请求收到响应后,才能发送. HTTP请求方法 根据HTTP标准,HTTP请求可以使用多种请求方法. HTTP1.0定义了三种请求方法: GET, POST 和…