浏览器下Xpath实用技巧

简介: 浏览器下Xpath实用技巧
在浏览器环境下,一些强大的xpath标准方法没有被支持(如正则匹配方法matches()),只能利用有限的方法做抽取,下面是列出我常用的一些查找技巧、经验;不定时更新。

常用

以下面的分页组件节点结构为例:

<div class="pageList">
    <span data-span style="display:none">.</span>
    <span class="disabled">‹</span>
    <span class="current" data-span>1</span>
    <a href="" style="display:none"></a>
    <a href="/Program/n-d-2-a-2">2</a>
    <a href="/Program/n-d-2-a-3">3</a>
    <a href="/Program/n-d-2-a-4">4</a>
    <a href="/Program/n-d-2-a-5">5</a>
    <a href="/Program/n-d-2-a-2">›</a>
    <a href="/Program/n-d-2-a-30" class="last">... 30</a>
</div>
<div class="ad">
    <a href='xxx'></a>
    <a href="xxx"><img src="xxx" /></a>
</div>

"或"条件

选取"上一页"、"下一页"节点:

//div[@class="pageList"]/span[@class="current" and @data-span]

"与"条件

选取"上一页"、"下一页"节点:

//div[@class="pageList"]/*[text()="‹" or text()="›" ]

"非"条件

选取不含href属性的a节点:

//div[@class="pageList"]/a[not(@href)]

包含

选取href属性包含‘Program’的a节点:

//div[@class="pageList"]/a[contains(@href,'Program')]

选取href属性不包含‘Program’的a节点:

//div[@class="pageList"]/a[not(contains(@href,'Program'))]

判断是否数字

选取文本是数字的a节点:

//div[@class="pageList"]/a[string(number(text())) != 'NaN'];

父节点

选取ad中的包含img的a节点:

//div[@class="ad"]/a/img/parent::a

相邻兄弟节点

选取第4页a节点前面的第一个相邻节点(即第3页a节点):

//div[@class="pageList"]/a[text()="4"]/preceding-sibling::a[1]

选取第4页a节点后面的第一个相邻节点(即第5页a节点):

//div[@class="pageList"]/a[text()="4"]/following-sibling::a[1]

以特定字符开头或结尾

选取href属性以“/Program”开头的a节点(结尾使用的方法是ends-with):

//div[@class="pageList"]/a[starts-with(@href,"/Program")]

上下文

选取前三个a:

//div[@class="pageList"]/a[position()<=3]

选取最后一个a:

//div[@class="pageList"]/a[last()]

js 实现Xpath方法

function getElementsByXpath(xpathToExecute, element) {
        element = (element === undefined)? document:element;
        var result = [];
        var nodesSnapshot = document.evaluate(xpathToExecute, element, null, XPathResult.ORDERED_NODE_SNAPSHOT_TYPE, null);
        for (var i = 0; i < nodesSnapshot.snapshotLength; i++) {
            result.push(nodesSnapshot.snapshotItem(i));
        }
        return result;
}

//调用示例
getElementsByXpath('//div')
getElementsByXpath('//div', document.body)

下面是标准轴和运算符,方便查看,这部分内容原文来自http://www.runoob.com/xpath/xpath-tutorial.html

XPath 运算符

XPath 表达式可返回节点集、字符串、逻辑值以及数字。
image.png

Xpath 轴

image.png

相关文章
|
Web App开发 JavaScript 开发者
Python+selenium 自动化-chrome页面静止、冻结技术,获取web动态页面的Xpath方法,查看浏览器动态dom节点
Python+selenium 自动化-chrome页面静止、冻结技术,获取web动态页面的Xpath方法,查看浏览器动态dom节点
509 0
Python+selenium 自动化-chrome页面静止、冻结技术,获取web动态页面的Xpath方法,查看浏览器动态dom节点
|
Web App开发 Python 数据采集
一个浏览器插件,测试xpath的工具
相信大家有一个感觉,就是每当写爬虫时,需要写xpath来找到我们要的数据,调试xpath会浪费很多时间,一次又一次的requests请求,每每看到取到的元素与自己心中想要的元素不符时.......... 今天为大家介绍一款谷歌浏览器插件,能帮大家在待抓取页面直接写xpath并且可以看到取到的元素,话不多说 上图: 打开Chrome商店,搜索 xpath-helper 会出现如图中的搜索结果,点击添加至CHROME按钮,根据提示完成添加即可。
1710 0
|
1月前
|
机器学习/深度学习 人工智能 前端开发
【人工智能】利用TensorFlow.js在浏览器中实现一个基本的情感分析系统
使用TensorFlow.js在浏览器中进行情感分析是一个非常实用的应用场景。TensorFlow.js 是一个用于在JavaScript环境中训练和部署机器学习模型的库,使得开发者能够在客户端直接运行复杂的机器学习任务。对于情感分析,我们可以使用预先训练好的模型来识别文本中的积极、消极或中性情感。
56 4
【人工智能】利用TensorFlow.js在浏览器中实现一个基本的情感分析系统
|
4月前
|
Web App开发 JavaScript 前端开发
浏览器与Node.js事件循环:异同点及工作原理
浏览器与Node.js事件循环:异同点及工作原理
|
26天前
|
编解码 JavaScript 前端开发
JS逆向浏览器脱环境专题:事件学习和编写、DOM和BOM结构、指纹验证排查、代理自吐环境通杀环境检测、脱环境框架、脱环境插件解决
JS逆向浏览器脱环境专题:事件学习和编写、DOM和BOM结构、指纹验证排查、代理自吐环境通杀环境检测、脱环境框架、脱环境插件解决
44 1
|
1月前
|
自然语言处理 资源调度 JavaScript
JS 逆向基础篇:JS作用域和浏览器对象属性补环境
JS 逆向基础篇:JS作用域和浏览器对象属性补环境
57 1
|
1月前
|
JavaScript
js怎样控制浏览器前进、后退、页面跳转
js怎样控制浏览器前进、后退、页面跳转
44 0
|
1月前
|
JavaScript UED
js之探索浏览器对象模型
js之探索浏览器对象模型
41 0

热门文章

最新文章

相关实验场景

更多