1.背景 urllib,urllib2是客户端http协议的实现，urllib2底层使用httplib,socket库，它主要包含urlopen, build_opener, install_opener等func。python2.7使用urllib2库中的urlopen会出现内存泄漏的现象，可以通 ...
分类：
Web程序 时间：
2019-01-13 22:22:41
阅读次数：
317
1、urllib和urllib2的区别： 1、获取baidu的网页源代码 urllib是python内置的http请求库。 urllib.request:请求模块。 ...
分类：
编程语言 时间：
2019-01-12 18:31:11
阅读次数：
169
首先，python 3.x中urllib库和urilib2库合并成了urllib库。 其中urllib2.urlopen()变成了urllib.request.urlopen() urllib2.Request()变成了urllib.request.Request() import urllib.r ...
分类：
编程语言 时间：
2019-01-10 13:13:33
阅读次数：
120
1.最基本的抓站 2.使用代理服务器 这在某些情况下比较有用，比如IP被封了，或者比如IP访问的次数受到限制等等。 1 2 3 4 5 import urllib2 proxy_support = urllib2.ProxyHandler({'http':'http://XX.XX.XX.XX:XX ...
分类：
编程语言 时间：
2019-01-09 23:32:26
阅读次数：
259
1. ModuleNotFoundError: No module named 'cookielib' Python3中，import cookielib改成 import http.cookiejar,然后方法里cookielib也改成 http.cookiejar。 2. ModuleNotFo ...
分类：
编程语言 时间：
2019-01-04 17:18:24
阅读次数：
883
1，请求：requests requests.get(url, headers) requests.post(url, data=data, files=files) urllib模块: Python2 import urllib2 response = urllib2.urlopen('http: ...
分类：
编程语言 时间：
2018-12-28 12:03:29
阅读次数：
177
Python十分适合用来开发网页爬虫，理由如下：1、抓取网页自身的接口比较与其他静态编程语言，如java，c#，c++，python抓取网页文档的接口更简练；比较其他动态脚本语言，如perl，shell，python的urllib2包供给了较为完整的访问网页文档的API。（当然ruby也是很好的挑选 ...
分类：
编程语言 时间：
2018-12-26 15:40:25
阅读次数：
196
1、Requests模块说明 Requests 是使用 Apache2 Licensed 许可证的 HTTP 库。用 Python 编写，真正的为人类着想。 Python 标准库中的 urllib2 模块提供了你所需要的大多数 HTTP 功能，但是它的 API 太渣了。它是为另一个时代、另一个互联网 ...
分类：
其他好文 时间：
2018-12-21 22:44:51
阅读次数：
412
本篇将介绍urllib2的Get和Post方法，更多内容请参考:python学习指南 urllib2默认只支持HTTP/HTTPS的GET和POST方法 urllib.urlencode() urllib和urllib2都是接受URL请求的相关参数，但是提供了不同的功能。两个最显著的不同如下： ur ...
分类：
编程语言 时间：
2018-12-18 00:09:06
阅读次数：
280
