参照着网上的爬虫案例（点我），先做了一个demo，基本的爬虫项目创建，以及数据抽取，数据分析，数据保存等等过程基本上有所掌握。
我的需求是需要检索指定的百度贴吧，根据指定的关键字库，搜索出含有关键字的链接，并抽取出来，用于后续告警。 因此，基于需求，分如下步骤：
第一：基于Scrapy创建爬虫项目；...
分类：
编程语言 时间：
2014-04-28 17:37:30
阅读次数：
707
在这里，我对于项目提出功能导航系统。即为每个导航地点分组，按功能属性统计并罗列在一起，在导航页面提供目的性查询，让客户通过勾选想要进行的活动来提供目的地和导航路线。并将各地点在功能搜索页面罗列出来并给出具体坐标。如：餐饮，上课，运动，购物，出行，标志建筑，专业分属等Need：需求方面，直接从导航的....
分类：
其他好文 时间：
2014-04-28 16:58:15
阅读次数：
595
1.电脑版(1).python安装目录中\Lib\site-packages\下建立*.pth文件，写入模块路径(2).添加环境变量:变量名:pythonpath;变量值:模块(文件夹)路径,若有多个,用半角分号";"隔开2.手机版在resource\site.py文件中添加代码段importsys...
分类：
编程语言 时间：
2014-04-28 08:43:14
阅读次数：
794
近期很多文章都提到了User-Agent (UA)
字符串，但大部分网友都不知道这个东西有什么用处。其实简单的说User-Agent就是客户端浏览器等应用程序使用的一种特殊的网络协议，在每次浏览器（邮件客户端/搜索引擎蜘蛛）进行
HTTP 请求时发送到服务器，服务器就知道了用户是使用什么浏览器（邮件...
分类：
其他好文 时间：
2014-04-28 04:25:14
阅读次数：
649
Alice and BobDescriptionAlice and Bob like
playing games very much.Today, they introduce a new game.There is a polynomial
like this: (a0*x^(2^0)+1) * ...
分类：
其他好文 时间：
2014-04-28 02:50:32
阅读次数：
357
http://acm.fzu.edu.cn/problem.php?pid=2168最重要的是dp[k]=dp[k-1]-ans[k-1]+x[i]*m;ans[k-1]是m个数求和。Problem
2168 防守阵地 I Accept: 14Submit: 20 Time Limit: 3000 ...
分类：
其他好文 时间：
2014-04-28 02:30:56
阅读次数：
442
http://acm.hdu.edu.cn/showproblem.php?pid=2485n个车站，m条边，两边之间费用为1，问最少摧毁多少车站，使得1-n无法在k时间内到达将2-(n-1)每个点拆成两个，并建立容量为1,费用为0的一条边，源点为1，汇点为2*n-2，这时求最小费用最大流，其中保证...
分类：
其他好文 时间：
2014-04-28 02:13:08
阅读次数：
418
http://acm.hdu.edu.cn/showproblem.php?pid=1596
1 #include 2 #include 3 #include 4 #define maxn 1001 5 using namespace std; 6 7
double g[maxn][maxn...
分类：
其他好文 时间：
2014-04-28 01:18:06
阅读次数：
597
在admin页面，输入相关内容后，会返回xml格式的内容。说明如下： 0 3 on 10 0
monitor 2.2 0.5747526 ...
分类：
其他好文 时间：
2014-04-27 22:10:48
阅读次数：
600
1、 solr基础因为 Solr 包装并扩展了
Lucene，所以它们使用很多相同的术语。更重要的是，Solr 创建的索引与 Lucene 搜索引擎库完全兼容。通过对 Solr
进行适当的配置，某些情况下可能需要进行编码，Solr 可以阅读和使用构建到其他 Lucene 应用程序中的索引。在 Sol...
分类：
其他好文 时间：
2014-04-27 21:38:00
阅读次数：
607
