XPath (XML Path Language) 是一门在 XML 文档中查找信息的语言，可用来在 XML 文档中对元素和属性进行遍历。 W3School官方文档 开发工具 开源的XPath表达式编辑工具:XMLQuire(XML格式文件可用) Chrome插件 XPath Helper Fire ...
分类：
其他好文 时间：
2018-07-19 21:26:33
阅读次数：
145
最近偷空研究了一下python，准备用python写一个爬虫。 在使用scrapy，爬取网页信息时，我需要去定位节点，所以也就有了下面这篇文章。 例子代码： 从例子代码中可以看到xpath()方法中的参数为xpath路径表达式。我要去写我所需要信息的xpath，才能抓取到我需要的信息，所以书写xpa ...
分类：
其他好文 时间：
2018-07-12 20:15:15
阅读次数：
197
问题： 具体报错如下图 简单说是定位不到元素。 解决办法：暂时不熟悉XPath的语法，认为可能是脚本中 XPath 描述（采用了相对元素定位方法）有误 ， 通过xpath-helper重归抓取了元素的完整xpath路径， 重新运行脚本，成功。 ...
分类：
其他好文 时间：
2018-06-19 16:09:59
阅读次数：
1266
参考：http://blog.csdn.net/su_tianbiao/article/details/52735399 内容： 每一个写爬虫、或者是做网页分析的人，相信都会因为在定位、获取xpath路径上花费大量的时间，甚至有时候当爬虫框架成熟之后，基本上主要的时间都花费在了页面的解析上。在没有这 ...
分类：
Web程序 时间：
2017-05-22 17:51:41
阅读次数：
155
参考：http://www.cnblogs.com/MyFlora/archive/2013/07/26/3216448.html 内容： 整个抓取使用了 xpath、正则表达式、消息中间件、多线程调度框架（参考）。xpath 是一种结构化网页元素选择器，支持列表和单节点数据获取，他的好处可以支持规 ...
分类：
其他好文 时间：
2017-05-18 11:27:35
阅读次数：
190
每一个写爬虫、或者是做网页分析的人，相信都会因为在定位、获取xpath路径上花费大量的时间，甚至有时候当爬虫框架成熟之后，基本上主要的时间都花费在了页面的解析上。在没有这些辅助工具的日子里，我们只能通过搜索html源代码，定位一些id去找到对应的位置，非常的麻烦，而且经常出错。这里介绍一个chrom ...
分类：
Web程序 时间：
2017-04-17 15:51:32
阅读次数：
198
本文主要讲解如何在scrapy中使用xpath获取各种你想要的值 使用豆瓣作为例子 https://book.douban.com/tag/%E6%BC%AB%E7%94%BB?start=20&type=T 此处可以配合chrome浏览器的插件 xpath helper配合验证你的xpath是否正 ...
分类：
编程语言 时间：
2016-11-16 14:49:26
阅读次数：
251
搬运自本人博客：http://www.xgezhang.com/xpath_helper.html
每一个写爬虫、或者是做网页分析的人，相信都会因为在定位、获取xpath路径上花费大量的时间，甚至有时候当爬虫框架成熟之后，基本上主要的时间都花费在了页面的解析上。在没有这些辅助工具的日子里，我们只能通过搜索html源代码，定位一些id去找到对应的位置，非常的麻烦，而且经常出错。这里介绍一个...
分类：
Web程序 时间：
2015-08-16 18:19:02
阅读次数：
388
下载方法：1. 访问http://chrome-extension-downloader.com/2. 把https://chrome.google.com/webstore/detail/xpath-helper/hgimnogjllphhhkhlmebbmlgjoejdpjl拷贝到文本框里面，然...
分类：
其他好文 时间：
2015-04-03 15:10:18
阅读次数：
257
