一.背景 上班的日子总是3点一线,家里,公司和上班的路径,对于一个特别懒得我来说,经常遇到上班路上下雨了,而我却没带伞,多么痛的领悟.最近对python有一种狂热的学习热情,写了4年多的C++代码,对于python我不能说简单,但是他做东西确实太快了,现有的第三方资源真的炒鸡多,用的我也是不亦乐乎.除了上班忘记带伞,每天重复性的工作还有很多,比如上下班打卡.每个礼拜的周报,还有如果有关心的女神,也可以做定时发送心里话,或者定时提醒等各种服务.有时候想如果有一个人能按时提醒我就好了,这种想法也就停…
目录 一.概述 二.模块重新划分 三.优化定时任务 四.发送邮件 五.源代码 一.概述 上一篇文章python-定时爬取指定城市天气(一)-发送给关心的微信好友中我们讲述了怎么定时爬取城市天气,并发送给指定微信好友,文末遗留两个问题 定时任务做成windows服务,这样更优雅,随开机启动 发送消息给微信好友换成发送邮件给指定邮箱 本篇文章我们在原来代码的基础上进行了一定的模块拆分,并处理以上两个问题 二.模块重新划分 1. 新增my_job.py文件,把任务模块单独划分出来 之前的定时任务使用的…
1.问题描述 ​ 最近在做一个pyqt登录校园网的小项目,想在窗口的状态栏加上当天的天气情况,用爬虫可以很好的解决我的问题. 2.解决思路 ​ 考虑到所处位置的不同,需要先获取本地城市地址,然后作为中国天气网的输入,爬取指定城市的天气信息. ​ a. 先通过https://www.ip.cn/爬取本地城市名称 b. 再通过获取本地城市名称作为输入 进入城市页面获取所需信息即可,看起来不难,不就是爬.爬吗 3.思路实现 ​ a 很容易实现,直接上代码 target_url = 'https://w…
Python爬取当前城市房源信息,以徐州为例代码效果图请看下方,其他部分请查看附件,一起学习,谢谢 # -*- coding: utf-8 -*- """ @Time : 2020/3/18 22:23 @Auth : Suk @File : 5.小猪短租相关信息.py @IDE : PyCharm @Motto: Knowing your ignorance is the best way to succeed. @Tips : 版权所有,转载,转发请注明,如有侵权请联系,…
本编博客是关于爬取天猫店铺中指定店铺的所有商品基础信息的爬虫,爬虫运行只需要输入相应店铺的域名名称即可,信息将以csv表格的形式保存,可以单店爬取也可以增加一个循环进行同时爬取. 源码展示 首先还是完整代码展示,后面会分解每个函数的意义. # -*- coding: utf-8 -*- import requests import json import csv import random import re from datetime import datetime import time c…
import requests import smtplib import schedule import time from bs4 import BeautifulSoup from email.mime.text import MIMEText from email.header import Header account = input('请输入你的邮箱:') password = input('请输入你的密码:') receiver = input('请输入收件人的邮箱:') def…
记录一下. 写做个网站,爬了另一个网站的内容来做自己网站的内容. 把脚本挂到服务器,每隔一个小时去爬一次资源,然后保存到一个HTML文件里. 用flask做web对接,当有请求的时候就返回那个HTML文件. 这样就实现了一个api接口.思路大概就这样,比较简单,没做什么防护. 下面这个是脚本代码. import requests,time,re #一共三个模块,没装的先装 def zyw(): while(True): url='https://www.525zyw.com/' #爬的网站URL…
import requests as r import re resul=r.get("http://www.imooc.com/course/list") urlinfo=re.findall(r'http:.+.jpg',resul.text) i=1 for url in urlinfo: f=open(str(i)+'.jpg','wb') li=r.get(url) f.write(li.content) f.close() i=i+1 代码很简单只有几行.其中主要用的知识的…
代码地址如下:http://www.demodashi.com/demo/13500.html 准备工作 安装python3.6 略 安装requests库(用于请求静态页面) pip install requests -i https://mirrors.ustc.edu.cn/pypi/web/simple 安装lxml库(用于解析html文件) pip install lxml -i https://mirrors.ustc.edu.cn/pypi/web/simple 安装与配置sele…
The summer is coming " 我知道,那些夏天,就像青春一样回不来. - 宋冬野 青春是回不来了,倒是要准备渡过在西安的第三个夏天了. 废话 我发现,自己对 coding 这件事的称呼,从敲代码 改为 写代码 了. emmm....敲代码,自我感觉,就像是,习惯了用 const 定义常量的我看到别人用 var 定义的常量. 对,优雅! 写代码 这三个字,显得更为优雅一些,更像是在创作,打磨一件精致的作品. 改编自 掘金站长 的一句话: " 子非猿,安之 coding 之…