码迷,mamicode.com
首页 > Windows程序 > 详细

C# 爬虫框架实现 概述

时间:2016-06-22 09:20:44      阅读:314      评论:0      收藏:0      [点我收藏+]

标签:

目录:

  1. C# 爬虫框架实现 概述 
  2. C# 爬虫框架实现 流程_爬虫结构/原理
  3. C# 爬虫框架实现 流程_各类开发
  4. C# 爬虫框架实现 流程_遇到的问题
  5. C# 爬虫框架实现 后记

 

开发目的:写这个程序主要是为了找工作。因为没项目在简历上吃大亏,空口无凭,只能做出点东西证明自己能做事情。

需自定义:

  • patternlist匹配项定义
  • 定义结果输出方式:本地sqlserver 的spider数据库,或者终端
  • 种子库

需要:

  • 开发使用了开源类:CSQuery解析HTML,所以patternlist匹配项的书写规范要符合CSQuery,其实基本和CSS选择器差不多
  • 使用visual studio 2015 update2

C# 爬虫框架实现 概述

标签:

原文地址:http://www.cnblogs.com/jiangtu/p/5605788.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!