在浏览器的验证窗口中输入登陆名和密码后，成功后会弹出一个小的新窗口，如果不小心关闭了这个窗口，则就会无法联网。如果说我在一个不带有桌面的Linux系统中，我是不能够通过浏览器接入网络的，虽然提供了不同系统的不同版本的客户端（没有用过），但是还是想自己做一个玩玩，同时依据上一篇博客中获取到的帐号进行尝 ...
分类：
编程语言 时间：
2016-10-24 23:47:23
阅读次数：
362
软院这边网速是挺不错的，而且在宿舍和实验室都是可以通过学号直接登陆的上网的，但是..有的时候实验室的台式机需要一个网号，笔记本需要一个网号，或者再加上一个路由器需要一个，然后，感觉网号托托的不够呀。刚开学分配网号的时候，每个人的密码都初始为同一个，嘿嘿。。。有些人其实懒得去改，或者是去了遥远的杭州， ...
分类：
编程语言 时间：
2016-10-23 20:55:03
阅读次数：
227
正则表达式中(.*?)是常用的匹配模式，匹配出了换行符以外的字符，是非贪婪模式，读取最少的匹配信息 在编译模式中是用re.S可以让(.*?)匹配任意字符，包括换行符。 try: except Exception, e: print e 捕获所有异常并打印异常信息 dir(),查看当前对象的所有可用方 ...
分类：
编程语言 时间：
2016-10-21 10:25:10
阅读次数：
168
httplib模块实现了HTTP和HTTPS的客户端部分，但是一般不直接使用，经常通过urllib来进行HTTP，HTTPS的相关操作。 如果需要查看其源代码可以通过查找命令定位： 整个请求过程的状态转移图如下所示： httplib提供如下的类： 1. httplib.HTTPConnection( ...
分类：
编程语言 时间：
2016-10-17 20:13:45
阅读次数：
271
Python应用现在如火如荼，应用范围很广。因其效率高开发迅速的优势，快速进入编程语言排行榜前几名。本系列文章致力于可以全面系统的介绍Python语言开发知识和相关知识总结。希望大家能够快速入门并学习Python这门语言。 本文是在前一部分Python基础之上Python实战：Python爬虫学习教 ...
分类：
编程语言 时间：
2016-10-07 22:50:36
阅读次数：
212
Python应用现在如火如荼，应用范围很广。因其效率高开发迅速的优势，快速进入编程语言排行榜前几名。本系列文章致力于可以全面系统的介绍Python语言开发知识和相关知识总结。希望大家能够快速入门并学习Python这门语言。 本文是在前一部分Python基础之上程序员带你十天快速入门Python,玩转 ...
分类：
编程语言 时间：
2016-10-07 22:44:41
阅读次数：
205
今天，花了一个晚上的时间边学边做，搞出了我的第一个爬虫。学习Python有两个月了，期间断断续续，但是始终放弃，今天搞了一个小项目，有种丰收的喜悦。废话不说了，直接附上我的全部代码。 结果截图如下： 缺憾：有部分数据被漏掉了，继续找原因中 ...
分类：
编程语言 时间：
2016-09-30 00:41:35
阅读次数：
285
Url Filter则是对提取出来的URL再进行一次筛选。不同的应用筛选的标准是不一样的，比如对于baidu/google的搜索，一般不进行筛选，但是对于垂直搜索或者定向抓取的应用，那么它可能只需要满足某个条件的url，比如不需要图片的url，比如只需要某个特定网站的url等等。Url Filter... ...
分类：
Web程序 时间：
2016-09-26 21:27:54
阅读次数：
270
Extractor的工作是从下载的网页中将它包含的所有URL提取出来。这是个细致的工作，你需要考虑到所有可能的url的样式，比如网页中常常会包含相对路径的url，提取的时候需要将它转换成绝对路径。这里我们选择使用正则表达式来完成链接的提取。 html标签中的链接地址通常会出现在href属性或者src... ...
分类：
Web程序 时间：
2016-09-25 06:05:04
阅读次数：
184
