通过前面的3篇博客已经简单的介绍了Android开发的过程并写了一个简单的demo，了解了Android开发的环境以及一些背景知识。接下来这篇博客不打算继续学习Android开发的细节，先停一下，明确一下接下来的学习目标以及学习路线。一、对Android开发的基本认识1、Android原生开发是基于Java语言的，由于我比较擅长C#，所以对Java语言本身不太熟练，需要加强Java语言基础的练习，...
分类：
移动开发 时间：
2014-07-28 00:06:20
阅读次数：
291
/** author： insun title:python 爬虫抓取心得分享 blog:http://yxmhero1989.blog.163.com/blog/static/112157956201311821444664/ **/??? 0x1.urllib.quote(‘要编码的字符串‘) 如果你要在url请求里面放入中文...
分类：
编程语言 时间：
2014-07-26 03:36:37
阅读次数：
334
1、http://www.oschina.net/project/tag/64/spider?lang=0&os=0&sort=view&搜索引擎 NutchNutch是一个开源Java实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。 尽管Web搜索是漫游In...
分类：
其他好文 时间：
2014-07-26 01:46:06
阅读次数：
442
CrawlSpider-爬取一般网站常用的spider。其定义了一些规则(rule)来提供跟进link的方便的机制。 也许该spider并不是完全适合您的特定网站或项目，但其对很多情况都使用。 因此您可以以其为起点，根据需求修改部分方法。当然您也可以实现自己的spider。...
分类：
其他好文 时间：
2014-07-20 10:18:09
阅读次数：
225
一、工具篇“公欲善其事，必先利其器”。编程是一门实践性很强的工作，在你以后的学习或工作中，你将常常会与以下工具打交道, 下面列出学习C语言编程常常用到的软件和工具。1、操作系统在UNIX或Linux系统中学习C很方便，所以在开始您的学习旅程前请先选择一个UNIX或Linux操作系统，目前可供个人免费...
分类：
编程语言 时间：
2014-07-17 22:16:34
阅读次数：
280
运用python抓取博客园首页的全部数据，并且定时持续抓取新发布的内容存入mongodb中...
分类：
数据库 时间：
2014-07-17 17:14:21
阅读次数：
292
python抓取伯乐在线的所有文章，对标题分词后存入mongodb中...
分类：
数据库 时间：
2014-07-16 17:09:20
阅读次数：
289
After an item has been scraped by a spider,it is sent to the Item Pipeline which process it through several components that are executed sequentially....
分类：
其他好文 时间：
2014-07-14 00:20:06
阅读次数：
323
上一篇博客我们成功地从网页上爬下了小说的一个章节，理所当然地，接下来我们要把整本小说都爬下来。首先，我们要把程序从原来的读完一章就结束，改成读完一章之后可以继续进行下一章的阅读。
注意到每个小说章节的网页下面都有下一页的链接。通过查看网页源代码，稍微整理一下（ 不显示了），我们可以看到这一部分的 HTML 是下面这种格式的：...
分类：
编程语言 时间：
2014-07-12 22:45:47
阅读次数：
341
虽然上一篇博客中我们可以连续地阅读章节了，但是，难道每一次看小说都运行一下我们的 Python 程序？连记录看到哪里都不行，每次都是重新来过？当然不能这样，改！现在这么多小说阅读器，我们只需要把我们要的小说抓取到本地的 txt 文件里就好了，然后自己选个阅读器看，怎么整都看你了。
其实上个程序我们已经完成了大部分逻辑，我们接下来的改动只需要把抓取到每一章的时候不用显示出来，而是存入 txt 文件之中。另外一个是程序是不断地根据下一页的 Url 进行抓取的，那么什么时候结束呢？注意当到达小说的最后一章...
分类：
编程语言 时间：
2014-07-12 18:35:14
阅读次数：
279
