有朋友问我正则,,okey,其实我的正则也不好,但是python下xpath是相对较简单的 简单了解一下xpath: XPath 是一门在 XML 文档中查找信息的语言.XPath 可用来在 XML 文档中对元素和属性进行遍历. XPath 是 W3C XSLT 标准的主要元素,并且 XQuery 和 XPointer 都构建于 XPath 表达之上. 因此,对 XPath 的理解是很多高级 XML 应用的基础. 这个是w3c上关于xpath的介绍,可以看出xpath是在xml文档中查询信息的语…

XPath语法和lxml模块 什么是XPath? xpath(XML Path Language)是一门在XML和HTML文档中查找信息的语言,可用来在XML和HTML文档中对元素和属性进行遍历. XPath开发工具 Chrome插件XPath Helper. Firefox插件Try XPath. XPath语法 选取节点: XPath 使用路径表达式来选取 XML 文档中的节点或者节点集.这些路径表达式和我们在常规的电脑文件系统中看到的表达式非常相似. 表达式 描述 示例 结果 nodena…

一.选取节点 常用的路劲表达式: 表达式 描述 实例   nodename 选取nodename节点的所有子节点 xpath(‘//div’) 选取了div节点的所有子节点 / 从根节点选取 xpath(‘/div’) 从根节点上选取div节点 // 选取所有的当前节点,不考虑他们的位置 xpath(‘//div’) 选取所有的div节点 . 选取当前节点 xpath(‘./div’) 选取当前节点下的div节点 .. 选取当前节点的父节点 xpath(‘..’) 回到上一个节点 @ 选取属性…

又是一个大晴天,因为马上要召开十九大,北京地铁就额外的拥挤,人贴人到爆炸,还好我常年挤地铁早已练成了轻功水上漂,挤地铁早已经不在话下. 励志成为一名高级测试工程师的我,目前还只是个菜鸟,难得有机会,公司辞职的爬虫大佬教了我下爬虫,故借此机会分享给那些小白, 此篇只是简单爬取了小说的标题,没有涉及到框架,还望各位大佬海涵!! 环境准备: pycharm(撩妹神器,人手一个)   lxml(python的三方库) 如果电脑里没有安装lxml的伙伴,可以安装一下,在控制台输入pip intall ht…

xpath是在xml文档中查找信息的语言, 其语法整理如下: 路径表达式(选取节点) div div下的所有子节点 /div 根节点下的div //div 匹配所有的div . 当前节点 .. 父节点 @lang 属性为lang的所有节点 谓语(某个节点下特定的节点) div[1] 选取第一个节点 div[last()] 选取最后一个节点 div[last()-1] 选取倒数第二个节点 div[positon()<3] 选取前两个节点 div[@lang] 选取有lang属性的节点 div[@l…

Python面向对象编程(OOP) 一.面向对象过程的优点特征: 封装 模型的特征和能力打包在一起 模型的改变由模型自身完成 隐藏模型的细节,外界只能使用,不能改变 继承 符合自然界分类规律 快速实现代码重用 符合现实世界中事物的特征 多态 子类可以继承父类的特征与能力 还可以通过自定义来修改其特征与能力 鸭子模型: 只要具有使用者的属性或能力便可以使用 |==>其他语言需要通过接口来实现 不同类,相同方法 相同类,不同方法 组合 一个模型可以由其他模型组成 二.类的具体实现和特征 1.类的定义…

一,安装编程工具并进入编程界面 首先去https://www.continuum.io/downloads/网站下载Anaconda工具并安装;打开cmd,输入jupyter notebook并回车(win7),他会自动帮你打开编辑界面(基于浏览器的):点击new按钮新建一个Python3的编辑框,他会弹出一个新窗口,好了现在可以敲代码了. 二,爬取整个页面 import requests          #导入requests模块 res = requests.get('http://stu…

Python是一门入门简单的编程语言,它的安装和搭建也非常简单.在大部分的发行Linux版本上都预装了python2,部分也预装了python3,需要查看Linux上是否安装Python,只需要在 命令行输入  python -v 或者  python3 -V 来查看Python的版本. 因为我使用的是linux,所以下面使用linux命令,window上的安装也是十分的简单. 在Linux中debian系统中可以使用apt软件包管理工具  sudo apt-get install python…

话不多说,直接上代码: import re import csv #爬虫的一个小例子,爬的是百度贴吧(网页版)某个帖子的各个楼层的用户名,发言内容和发言时间(使用到了正则表达式) source3.txt是网页源代码 with open('source3.txt', 'r', encoding='UTF-8') as f: source = f.read() result_list = [] every_floor = re.findall('"l_post j_l_post l_post_bri…

1.知道本节点元素,如何定位到兄弟元素 详情见博客 XML代码见下 bt1在文档中只出现一次,所以很容易获取到bt1中内容,那怎么根据<td class='bt1'>来获取bt2中的内容 content_title = driver.find_element_by_xpath("//td[@class='bt1']").text # 获取content_title的父节点的哥哥节点 content_subtitle = driver.find_element_by_xpat…