使用urllib2访问页面：
import urllib2
import cookielib
url = "http://www.baidu.com"
print 'The first method : '
response1 = urllib2.urlopen(url)
print response1.getcode()
print len(response1.read())
print...
分类：
编程语言 时间：
2016-05-10 12:59:19
阅读次数：
336
Cookielib模块主要的对象有CookieJar、FileCookieJar、MozillaCookieJar、LWPCookieJar 它们的关系：CookieJar —-派生—->FileCookieJar —-派生—–>MozillaCookieJar和LWPCookieJar 获取Coo ...
分类：
其他好文 时间：
2016-04-14 15:36:58
阅读次数：
105
一直以来技术群里会有新入行的同学提问关于urllib和urllib2以及cookielib相关的问题。所以我打算在这里总结一下，避免大家反复回答同样的问题浪费资源。 这篇属于教程类的文字，如果你已经非常了解urllib2和cookielib那么请忽略本篇。 首先从一段代码开始， #cookie im ...
分类：
编程语言 时间：
2016-04-11 13:55:20
阅读次数：
250
模拟人人登陆 #encoding=utf-8 import urllib2 import urllib import cookielib def renrenBrower(url,user,password): #登陆页面，能够通过抓包工具分析获得，如fiddler。wireshark login_
分类：
编程语言 时间：
2016-02-04 09:48:01
阅读次数：
242
在编写python网络爬虫时，除了要考虑到爬虫的异常处理问题，我们是否还会考虑到cookie的使用呢？在使用cookie时，有想过为什么要使用cookie吗？一起来看看吧。
分类：
编程语言 时间：
2015-12-18 17:55:53
阅读次数：
992
一、从HTML文档中提取链接模块HTMLParser，该模块使我们能够根据HTML文档中的标签来简洁、高效地解析HTML文档。处理HTML文档的时候，我们常常需要从其中提取出所有的链接。使用HTMLParser模块后，这项任务将变得易如反掌。首先，我们需要定义 一个新的HTMLParser类，以覆盖...
分类：
编程语言 时间：
2015-12-09 16:49:59
阅读次数：
556
Python2.7里内置了很多非常有用的库，它在我电脑上的位置在/usr/lib/python2.7中。写个基本的爬虫要用到的库有urllib、urllib2、cookielib、sgmllib和re，下面先分别简单介绍下一些文件的信息和相关函数——具体的真的是建议阅读源码，网上找的资料反而不及它直...
分类：
编程语言 时间：
2015-10-08 00:27:20
阅读次数：
306
仅仅列出我用到的，不全。划重点： 1. urllib2 用 urllib.request 代替 2. urllib.urlencode 用 urllib.parse.urlencode 代替 3. cookielib 用 http.cookiejar 代替 4. print " " 用 pr...
分类：
编程语言 时间：
2015-10-04 18:24:01
阅读次数：
415
#!/usr/bin/python
#coding:UTF-8
importurllib,urllib2,cookielib,time,re,random
classLogin:
_loginurl=‘http://home.51cto.com/index.php?s=/Index/doLogin‘
_ua=‘*****‘#username
_ps=‘*****‘#password
_re=‘src="(.+?)"‘
_headers=[(‘User-agent‘,‘Mozilla/4.0(compati..
分类：
编程语言 时间：
2015-08-19 17:43:20
阅读次数：
178
最近需要模拟游戏登陆，蛋疼 1 #coding=utf-8 2 import os 3 import urllib 4 import urllib2 5 import re 6 import cookielib 7 import json 8 9 10 headers = {}11 headers....
分类：
编程语言 时间：
2015-08-11 14:01:39
阅读次数：
225
