Xpath做数据解析
xpath是一个路径表达式,
(1)xpath节点
在XPath中,有七种类型的节点:元素,属性,文本,命名空间,处理指令,注释以及文档节点;XML文档是被作为节点树来对待的。树的根被称为文档节点或者根结点
(2)xpath语法
xpath使用路径表达式来选取XML文档中的节点或节点集。节点是通过沿着路径(path)或者步(steps)来获取的。
//
表示从匹配选择的当前节点选择文档中的节点,而不考虑它们的位置。例如:
<?xml version="1.0" encoding="UTF-8"?>
<bookstore>
<book>
<title lang="eng">Harry Potter</title>
<price>29.99</price>
</book>
<book>
<title lang="eng">Learning XML</title>
<price>39.95</price>
</book>
</bookstore>
其中,选取节点方式为:
表达式 | 描述 |
---|---|
bookstore |
表示选取bookstore元素的所有子节点; |
/bookstore |
表示选取根元素bookstore; |
bookstore/book |
表示选取bookstore的子元素的所有book元素; |
//book |
表示选取所有book子元素,而不管它们在文档中的位置; |
bookstore//book |
表示选取bookstore元素的后代的所有book元素,而不管它们位于bookstore之下的什么位置; |
//@lang |
表示选取名为lang的所有元素。 |
选择谓语方式为:
谓语用来查找某个特定的节点或者包含某个指定的值的节点;谓语被嵌套在方括号中;
路径表达式 | 结果 |
---|---|
/bookstore/book[1] |
表示选取属于bookstore子元素的第一个book元素; |
/bookstore/book[last()] |
表示选取属于bookstore子元素的最后一个book元素; |
/bookstore/book[-1] |
表示选取bookstore子元素的倒数第二个book元素; |
bookstore/book[position()<3] |
选取最前面的两个属于bookstore元素的子元素的book元素; |
//title[@lang] |
表示选取所有拥有名为lang的属性的title元素; |
//title[@lang='eng'] |
表示选取所有拥有属性lang的值为eng的title元素; |
bookstore/bookprice>35.00] |
表示选取bookstore元素的所有book元素,且其中的price元素的值须大于35.00; |
/bookstore/book[price>35.00]/title |
表示选取bookstore元素中的book元素的所有title元素,且其中的price元素的值须大于35.00。 |
选取未知节点:(通配符)
XPath通配符可用来选取位置的XML元素;
通配符 | 描述 |
---|---|
* |
匹配任何元素节点; |
@* |
匹配任何属性节点; |
node() |
匹配任何类型的节点; |
对应的路径表达式可以为:
路径表达式 | 结果 |
---|---|
/bookstore/* |
选取文档中的所有元素; |
//* |
表示文档中的所有元素。 |
//title[@*] |
选取所有带有属性的title元素。 |
选取若干路径:
通过在路径表达式中使用“|”运算符,您可以选取若干个路径。
|//book/title | //book/price
|表示book元素的所有title和price元素;|
|//title | //price
|表示文档中的所有title和price元素;|
|bookstore/book/title | //price
|表示选取属于bookstore元素的book元素的所有title元素,以及文档中所有的price元素;|
因此://dd[@data-index = '0']
表示选取所有dd子元素,且其属性data-index的值为0;
//div[@class='option-list']
表示选取所有div子元素,且其属性class的值为option-list;
/a/text()
表示选取属于a元素节点中的所有文本;其中text()
表示匹配任何文本类型的节点;
故//dd[@data-index = '0']//div[@class='option-list']/a/text()
表示选取所有属性data-index值为0的dd元素下的所有属性class值为option-list的div元素下的a元素的所有文本;
而//dd[@data-index = '0']//div[@class='option-list']/a/@href
表示选取所有属性data-index值为0的dd元素下的所有属性class值为option-list的div元素下的a元素的所有属性为href的数据;
Xpath做数据解析的更多相关文章
- 070.Python聚焦爬虫数据解析
一 聚焦爬虫数据解析 1.1 基本介绍 聚焦爬虫的编码流程 指定url 基于requests模块发起请求 获取响应对象中的数据 数据解析 进行持久化存储 如何实现数据解析 三种数据解析方式 正则表达式 ...
- python爬虫数据解析的四种不同选择器Xpath,Beautiful Soup,pyquery,re
这里主要是做一个关于数据爬取以后的数据解析功能的整合,方便查阅,以防混淆 主要讲到的技术有Xpath,BeautifulSoup,PyQuery,re(正则) 首先举出两个作示例的代码,方便后面举例 ...
- python爬虫的页面数据解析和提取/xpath/bs4/jsonpath/正则(1)
一.数据类型及解析方式 一般来讲对我们而言,需要抓取的是某个网站或者某个应用的内容,提取有用的价值.内容一般分为两部分,非结构化的数据 和 结构化的数据. 非结构化数据:先有数据,再有结构, 结构化数 ...
- Python网络爬虫之三种数据解析方式 (xpath, 正则, bs4)
引入 回顾requests实现数据爬取的流程 指定url 基于requests模块发起请求 获取响应对象中的数据 进行持久化存储 其实,在上述流程中还需要较为重要的一步,就是在持久化存储之前需要进行指 ...
- 爬虫-数据解析-xpath
xpath 解析 模块安装 : pip install lxml xpath的解析原理 实例化一个etree类型的对象,且将页面源码数据加载到该对象中 需要调用该对象的xpath方法结合着不同形式的x ...
- 数据解析(XML和JSON数据结构)
一 解析 二 XML数据结构 三 JSON 数据结构 一 解析 1 定义: 从事先规定好的格式中提取数据 解析的前提:提前约定好格式,数据提供方按照格式提供数据.数据获取方则按照 ...
- iOS - XML 数据解析
前言 @interface NSXMLParser : NSObject public class NSXMLParser : NSObject 1.XML 数据 XML(Extensible Mar ...
- iOS开发——网络Swift篇&JSON与XML数据解析
JSON与XML数据解析 JSON数据解析(内置NSJSONSerialization与第三方JSONKit) 一,使用自带的NSJSONSerialization 苹果从IOS5.0后推出了SD ...
- 玩转iOS开发 - JSON 和 Xml 数据解析
前言 Json 和xml是网络开发中经常使用的数据格式,JSON轻量级.xml相对较复杂.所以如今用JSON的比例很大.基本上从server获取的返回数据都是JSON格式的,作为iOS开发人员,解析J ...
随机推荐
- AGC006D Median Pyramid Hard
闲扯 今天模拟的题,应该是挺简单的二分和贪心,就是没想出来,我好弱啊 顺便ORZ聚聚BLUESKY007,踩爆我了 思路 今天发现中位数性质如此优秀 二分最后塔顶的数,大于等于它的数变为1,小于它的数 ...
- (转载)C#:Enum、Int和String的互相转换,枚举转换
Enum为枚举提供基类,其基础类型可以是除 Char 外的任何整型.如果没有显式声明基础类型,则使用 Int32.编程语言通常提供语法来声明由一组已命名的常数和它们的值组成的枚举.注意:枚举类型的基类 ...
- demoshow - webdemo展示助手
demoshow - web demo展示助手 动态图演示页面: http://www.cnblogs.com/daysme/p/6790829.html 一个用来展示前端网页demo的小“助手”,提 ...
- function CONVERSION_EXIT ****INPUT/OUTPUT说明
CONVERSION_EXIT_ALPHA_INPUT和CONVERSION_EXIT_ALPHA_OUTPUT 函数说明 CONVERSION_EXIT_MATN1_INPUT 物料号码转换函数 C ...
- _itemmod_nopatch、_itemmod_nopatch_level、_itemmod_nopatch_spell、_itemmod_nopatch_src、_itemmod_nopatch_stat、_itemmod_nopatch_stat_prefix
原始物品(_itemmod_nopatch中Entry)需要能够装备 该功能产生的新物品不需要制作dbc 尽量避免配置主动技能(_itemmod_nopatch_spell) _itemmod_nop ...
- Oracle 11G Client客户端安装
参考资料: http://www.cnblogs.com/jiguixin/archive/2011/09/09/2172672.html http://blog.csdn.net/lanchengx ...
- IIS附加进程调试
- var_export
var_export可以将一个数组转为一个字符串,以符合PHP的代码风格,输出者展示一个字符串的内容. 多用于展示php代码结构,调试代码. <?php // 场合多用于展示php代码结构,调试 ...
- 文件编码检测.ZC
1.今天(20181101) 发现 g文件中的 xml头 和 文件编码不一致,最后发现 貌似是我搞错了,人家的文件 编码方式写的是对的. 我发现的现象是:XML里面写的是"GBK" ...
- ps p图
1. 常用快捷键 ctrl + 单击 选中图层ctrl + j 复制出拷贝的图层 Shift+Alt+S 保存ctrl + s 保存shift + ctrl + alt + s 保存为 web 格式图 ...