【转】C#+HtmlAgilityPack+XPath带你采集数据(以采集天气数据为例子) 第一次接触HtmlAgilityPack是在5年前，一些意外，让我从技术部门临时调到销售部门，负责建立一些流程和寻找潜在客户，最后在阿里巴巴找到了很多客户信息，非常全面，刚开始是手动复制到Excel，是真尼玛 ...
【转】使用HtmlAgilityPack批量抓取网页数据 相关软件点击下载登录的处理。因为有些网页数据需要登陆后才能提取。这里要使用ieHTTPHeaders来提取登录时的提交信息。抓取网页 HtmlAgilityPack.HtmlDocument htmlDoc; if (!string.IsNu ...
分类：
Web程序 时间：
2017-04-13 11:08:32
阅读次数：
178
Main程序 BookDataParser.cs ...
以上是完整代码，用的HtmlAgilityPack组件解析html，直接开源下载就可以。关键的数据都已经获得到 如：区号 和名称 你可以用来写入你的数据库即可。 ...
分类：
其他好文 时间：
2016-12-28 21:26:41
阅读次数：
371
说起采集，其实我是个外行，以前拔过阿里巴巴的客户数据，在我博客的文章：C#+HtmlAgilityPack+XPath带你采集数据(以采集天气数据为例子) 中，介绍过采集用的工具，其实很Low的，分析Html，用开源的HtmlAgilityPack就很快解决问题了。我个人并不是技术特别深，所以只要是... ...
前言：打算做一个药材价格查询的功能，但刚开始一点数据都没有靠自己找信息录入的话很麻烦的，所以只有先到其它网站抓取存到数据库再开始做这个了。 HtmlAgilityPack在c#里应该很多人用吧，简单又强大。之前也用它做过几个爬取信息的小工具。不过很久了源代码都没有了，都忘了怎么用了，这次也是一点一点 ...
分类：
数据库 时间：
2016-12-07 13:59:42
阅读次数：
246
最近自己找了一个开源的博客网站，放到阿里云上，方便自己发布博客。 我一般把文章发布到博客园和QQ空间，家了这个网站后又要多发布一次，为了省事就做了一个从博客园读取文章的功能； 输入链接URL地址点击提交； 从GetHub安装HtmlAgilityPack 后台C#代码 应用的技术 WebClient ...
分类：
Windows程序 时间：
2016-11-04 16:51:00
阅读次数：
1256
ColorConsole htmlagilitypack.1.4.9.5 经测试效率比 CsQueryLaster 高 csvhelper Extend Devlib系列一套 itextsharp litedb log4net microsoft.bcl一套，.net4 await 用 MySql.... ...
分类：
其他好文 时间：
2016-09-17 10:47:37
阅读次数：
379
HtmlAgilityPack组件用于解析Html字符串，一个典型的应用场景是用于网页爬虫。 示例程序 using Common.Tools; using Datebase.Entity; using HtmlAgilityPack; using Http.Extension; using Serv ...
分类：
Web程序 时间：
2016-07-30 11:49:25
阅读次数：
215
最近学习.NET Core ，想把自己之前的一个项目升级到 .NET Core。 发现HtmlAgilityPack 没法进行引用，遂自己做了些修改，可以运行在 .NET Core 中。现在分享出来，也是为 .NET Core 做一些贡献。 .NET Core版 HtmlAgilityPack HT ...
分类：
Web程序 时间：
2016-06-20 11:16:23
阅读次数：
251
