lxml库 lxml 是 一个HTML/XML的解析器，主要的功能是如何解析和提取 HTML/XML 数据。 lxml和正则一样，也是用 C 实现的，是一款高性能的 Python HTML/XML 解析器，我们可以利用之前学习的XPath语法，来快速的定位特定元素以及节点信息。 lxml pytho ...
分类：
其他好文 时间：
2018-09-17 16:13:13
阅读次数：
157
1. 使用Xpath语法，应该使用Element.xpath方法，来执行xpath选择，示例代码如下： trs = html.xpath("//tr[position() 2]") xpath函数返回的永远是一个列表 2.获取某个标签的属性： href = html.xpath("//a/@href ...
分类：
其他好文 时间：
2018-09-11 22:00:53
阅读次数：
217
[toc] 1、安装 Xpath 2、Xpath基本使用 3、Xpath语法 3.1、常用的路径表达式 表达式 | 描述 | nodename | 选取此节点的所有子节点。 / | 从根节点选取。 // | 从匹配选择的当前节点选择文档中的节点，而不考虑它们的位置。 . | 选取当前节点。 .. | ...
分类：
编程语言 时间：
2018-09-10 00:54:24
阅读次数：
202
跟你说，你总是靠那个firebug，chrome的F12啥的右击复制xpath绝对总有一天踩着地雷炸的你死活定位不到，这个时候就需要自己学会动手写xpath，人脑总比电脑聪明，开始把xpath语法给我学起来！ 第1种方法：通过绝对路径做定位（相信大家不会使用这种方式） By.xpath("html/ ...
分类：
编程语言 时间：
2018-09-09 18:14:29
阅读次数：
240
1.爬虫基础 2.爬虫基础二 XPath语法和lxml模块 3.爬虫基础三 BeautifulSoup4库 4.爬虫基础四 正则表达式 5.爬虫基础五 json文件处理、csv文件处理、MySQL数据库操作 6.爬虫基础六 多线程爬虫 7.爬虫基础七 图形验证码识别技术 8.爬虫基础八Scrapy框 ...
分类：
其他好文 时间：
2018-09-02 20:25:46
阅读次数：
206
1、需要安装库HtmlAgilityPack ,官网http://htmlagilitypack.codeplex.com/ XPath语法：http://www.w3school.com.cn/xpath/xpath_syntax.asp ...
JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式，它使得人们很容易的进行阅读和编写。同时也方便了机器进行解析和生成。适用于进行数据交互的场景，比如网站前台与后台之间的数据交互。 官方文档：http://docs.python.org/library/jso ...
分类：
编程语言 时间：
2018-08-11 22:05:38
阅读次数：
182
节点（node） 在 XPath 中，有七种类型的节点：元素、属性、文本、命名空间、处理指令、注释以及文档（根）节点。XML 文档是被作为节点树来对待的。树的根被称为文档节点或者根节点。 以下面这xml文档为例： <?xml version="1.0" encoding="ISO-8859-1"?> ...
分类：
其他好文 时间：
2018-06-14 18:32:28
阅读次数：
1241
前言 这一章节主要讲解Xpath的基础语法，学习如何通过Xpath获取网页中我们想要的内容;为我们的后面学习Java网络爬虫基础准备工作。 备注:此章节为基础核心章节，未来会在网络爬虫的数据解析环节经常使用，学会Xpath解析语法，可为未来爬虫解析省去很多麻烦。 Xpath简介 XPath即为XML ...
分类：
其他好文 时间：
2018-05-19 14:50:26
阅读次数：
6197
xpath基本知识 XPath语法：使用路径表达式来选取XML或HTML文档中的节点或节点集 路径表达式 nodename:表示选取此节点的所有子节点 / ： 表示从根节点选取 // ：选择任意位置的某个节点。 . ：选取当前节点 .. ：选取当前节点的父节点 @ ：选取属性 谓语实例 实现效果 路 ...
分类：
编程语言 时间：
2018-05-08 19:40:46
阅读次数：
218
