环境:mac python3.7 pyqt5 pyinstaller ps: 主要是熟悉pyqt5, 加入了单选框 输入框 文本框 文件夹选择框及日历下拉框 效果图: pyqt5 主程序文件 # -*- coding: utf-8 -*- # @Author: Mehaei # @Date: 2019-07-10 13:02:56 # @Last Modified by: Mehaei # @Last Modified time: 2019-07-15 16:43:18 import os im

美剧<权力的游戏>终于开播最后一季了,在上周写了个简单的可视化美剧的爬虫软件来爬取美剧,链接:https://www.cnblogs.com/weijiutao/p/10614694.html,没想到真有小伙伴用了,并且提出一个小建议,爬取的链接是一个下载链接,需要下载后才能观看,希望能做一个可在线观看的.然后就有了本篇. 话不多说,先看运行结果: 跟之前的其实没多大区别,有变化的是这次爬取的网站链接和内部需要重新做的爬取内容. 注:由于本篇和上篇爬取流程大致相同,所以本篇只是做简单的内容讲解

美剧<权力的游戏>终于要开播最后一季了,作为马丁老爷子的忠实粉丝,为了能够看得懂第八季复杂庞大的剧情架构,本人想着将前几季再稳固一下,所以就上美剧天堂下载来看,可是每次都上去下载太麻烦了,于是干脆自己写个爬虫爬下来得了. 话不多说,先上图片. 本人才疏学浅,就写了个简单的可视化软件,关键是功能实现就行了嘛. 实现语言:Python ,版本 3.7.1 实现思路:首先运用 Python 工具爬取到数据再实现图形化软件. 由于这里只是实现简单的爬取数据,并没有牵扯到 cookie 之类的敏感信息,

又是一天时间(又没做大作业).今天的心路历程:(1)前端后端怎么连接?(2)后端数据库插数据(3)完全没用上之前的字典反查法(4)突然发现面向对象编程其实很好用,甚至越用越上瘾(5)QLineEdit.QInputDialog.QGridLayout(6)用clicked.connect()触发“事件”(7)设计函数连接数据库,QtSql(8)QSqlDatabase.QSqlQuery这两个小东西可真让我踩了不少的坑(9)几句踩到类的关键代码 query = QSqlQuery() “实例化”

使用python爬虫需要使用webkit执行javascript,查找资料可使用pyqt5,在此记录下安装步骤 windows 安装pyqt5 操作webkit 可用版本 1. 下载python 3.4 2. 下载pyqt5 (pyqt5.5.1)  https://sourceforge.net/projects/pyqt/files/PyQt5/PyQt-5.5.1/ 3. 安装完成 *\Python34\Lib\site-packages\PyQt5\examples\webkit 可查看

小爬最近随着对python中字符串.json等理解进一步加深,发现先前我随笔中提到的data构造和传参方法略复杂,原本有更简单的方法,Mark如下. 先前小爬我使用的requests.post请求中data构造的代码如下: data_search={ 'page':1, 'rows':15, 'condition': """[\ {"column":"BPM_DEF_NAME","exp":"like&qu

最近几天新入坑了python的GUI设计,回想一下我为什么会入门这个???好像是在知乎上看到你都用 Python 来做什么? 这篇文章,看到有人回答说将python打包成exe文件,然后就想把之前弄得一个selenium的自动化项目打包成exe,现在想想有点滑稽,好像需要Chrome的版本对应打包的chromedriver才行(手动滑稽) 下面将介绍一下pyqt5的安装,在安装的时候我也浪费了不少时间找教程.现在来总结一下这段万里长征路. pyqt5安装 直接使用pip安装,但是需要SIP的支持

写的一个爬虫程序,主要用到以下库.但是伴随着代码增多,功能增多.经常性的程序崩溃现象,逐渐显现. pyqt5_5.8.2,requests.get,selenium+chorme,threading.Thread,queue.Queue 多次完善代码与程序,甚至已经尝试了各种python版本,与pyqt5版本.甚至pyqt5-tools的版本也换了,都无法处理程序崩溃. 关于访问系统的地方,都已经加了线程锁. 程序崩溃的情况,基本上都会在程序运行一段很短的时间后就出现. 根据程序多次崩溃的情况,

[转]PyQt5开发环境配置并使用 https://blog.csdn.net/HuangZhang_123/article/details/78046706 本人新书<玩转Python网络爬虫>,可在天猫.京东等商城搜索查阅或通过右侧图书链接购买,项目深入浅出,适合爬虫初学者或者是已经有一些网络爬虫编写经验,但希望更加全面.深入理解Python爬虫的开发人员. python:3.5 PyQt5 欢迎加入学习交流QQ群:657341423 安装流程 PyQt5安装 在cmd下输入pip ins

1.beautifulsoap4 和 scrapy解析和下载网页的代码区别 bs可以离线解释html文件,但是获取html文件是由用户的其他行为的定义的,比如urllib或者request : 而scrapy是一个完整的获取程序,只需要把网址贴上去,就会自动去爬. 省去很多用户需要关注的细节. 轮子和车子的区别. 前者要依附于一个程序,后者自己就能跑. beautifulsoap4 的性能比lxml要差   2.mongodb非关系型数据库对网页的存储 mongodb安装注意:不用选中compa

欢迎关注博主主页,学习python视频资源,还有大量免费python经典文章 sklearn实战-乳腺癌细胞数据挖掘(博主亲自录制视频) https://study.163.com/course/introduction.htm?courseId=1005269003&utm_campaign=commission&utm_source=cp-400000000398149&utm_medium=share pyqt4只有440个类, pyqt5有1000个类 pyqt商业版本和开

sklearn实战-乳腺癌细胞数据挖掘(博主亲自录制视频) https://study.163.com/course/introduction.htm?courseId=1005269003&utm_campaign=commission&utm_source=cp-400000000398149&utm_medium=share Python UI我感觉PyQt最强大最方便.但是Python的更新速度太快,让诸多类似库跟不上节奏. PyQt做UI早前只支持Python3.4或py

背景 Scrapy爬虫的确是好使好用,去过scrapinghub的官网浏览一下,更是赞叹可视化爬虫的犀利.scrapinghub有一系列的产品,开源了大部分项目,Portia负责可视化爬虫的编辑,SpiderCloud负责云端爬虫的部署,Scrapy是实现他们底层的技术.国内的可视化爬虫技术也有不少,据我所知就这几种: 集搜客 造数 如果有其他优秀的可视化爬虫我没有提到,大家可以补充.他们的功能暂不讨论,但他们都没有开源的,不方便我们研究. 而scrapinghub将Portia开源出来了,我们

1.环境安装: 1.安装pyQt5 pip3 install pyQt5   2.安装设计器 pip3 install pyQt5-tools  (英文版的) 我是用的是自己Windows上安装的qt-unified软件 3.qt-unified安装,下载地址 https://www.qt.io/   2.qt-unified软件设计界面 新建项目—>Qt—>From 根据左边菜单栏上的控件直接拖到窗口上布局 设计如下界面: 保存文件,命令行切换到保存的.ui文件目录执行如下命令将.ui文件转

PyQt5+requests实现一个车票查询工具,供大家参考,具体内容如下 结构图   效果图   思路 1.search(QPushButton)点击信号(clicked)连接到自定义的槽函数(event.search) 2.槽函数(event.search)接收四个参数:QTableWidget对象的引用.两个QLabel中的内容(站台名称).QDateEdit格式化日期 3.槽函数(event.search)调用爬虫类(TrainService)获取车次信息,添加到QTableWidget

一.写在前面 从学 Python 的第一天起,我就知道了使用 pip 命令来安装包,从学习爬虫到学习 Web 开发,安装的库越来越多,从 requests 到 lxml,从 Django 到 Flask,各种各样的库都处在一个 Python 环境之中. 这种做法对于我这种懒人来说是再适合不过的了,但是这样也是会有问题的.第一个问题在于 Pycharm 的加载速度变得慢了,因为要导入太多包了,而其中很多包对于很多程序来说根本用不上.第二个问题在于很多模块之间是有版本要求的,都需要特定的版本才能执行

翻译小助手 开发需求 首先五月份的时候,正在学习爬虫的中级阶段,这时候肯定要接触到js逆向工程,于是上网找了一个项目来练练手,这时碰巧有如何进行对百度翻译的API破解思路,仿造网上的思路,我摸索着完成了基本的js逆向请求,于是又了解到了Pyqt5图形界面开发库,想着能不能开发一款应用,于是就有了这个小项目. 开发思路 对于前期的开发,我是边学习Pyqt5的控件及其布局等知识,来构造该软件的雏形,后期主要是优化程序,处理异常,以及修复以前的bug,开发软件不是很难,但是维护和修复确实是一件比较费时

由于这个是毕业设计的内容,而且还是跨专业的.爬虫程序肯定是很简单的,就是调用Yahoo的API进行爬取图片.这篇博客主要讲的是基础的界面设计. 放上源码,然后分部解析一下重要的地方.注:flickrapi需要翻墙 代码复制的时候可能掉几个字母或者符号,不建议复制代码,如需复制请自行检查是否有拼写错误 可以使用pip install  来安装flickrapi和pyqt5和pyqt5-tools 总体界面如图所示: 下面是源码: import sys import os from PyQt5.Qt

源码 https://github.com/vicety/Pixiv-Crawler,功能什么的都在这里介绍了 说几个重要的部分吧 登录部分 困扰我最久的部分,网上找的其他pixiv爬虫的登录方式大多已经不再适用或者根本就没打算登录…… 首先,登录时显然要提交FormData,一开始我请求的是 https://accounts.pixiv.net/login?lang=zh 这个页面 这个postkey可以发现和网页代码中的这个部分(下图)中是一样的,但是用这个postKey是登录不上去的,结果

一.窗口 #设置窗口标题 setWindowTitle("标题") #设置窗口坐标和大小 setGeometry(0,0,800,600) """ 项目模块: PyQt5 项目内容:窗口 """ #导入系统参数 import sys #导入PyQt5 from PyQt5.QtGui import * from PyQt5.QtWidgets import * #定义类 class MyWidget(QWidget): def