1.之前在网页中URl链接采用Urllib/Urllib2，但是现在加强版requests模块进行网页URl提取，requests库模拟登录或者登录动态网页 URL理解：网页抓取过程浏览器向服务器请求的过程：1.访问资源命名机制2.存放资源主机3.资源自身的路径 对requests模块的入门：htt ...
分类：
Web程序 时间：
2016-08-09 21:54:18
阅读次数：
619
python通过get方式,post方式发送http请求和接收http响应-- import urllib模块,urllib2模块, httplib模块 http://blog.163.com/xychenbaihu@yeah/blog/static/132229655201231085444250 ...
分类：
编程语言 时间：
2016-08-08 18:59:20
阅读次数：
188
使用Package Control组件安装 按Ctrl+`调出console（注：安装有QQ输入法的这个快捷键会有冲突的，输入法属性设置-输入法管理-取消热键切换至QQ拼音）； 如果是sublime text2 输入以下python代码：import urllib2,os,hashlib; h = ...
分类：
其他好文 时间：
2016-08-08 12:44:14
阅读次数：
121
urllib2是Python的一个获取URLs(Uniform Resource Locators)的组件。他以urlopen函数的形式提供了一个非常简单的接口， 这是具有利用不同协议获取URLs的能力，他同样提供了一个比较复杂的接口来处理一般情况，例如：基础验证，cookies,代理和其他。 它们 ...
分类：
编程语言 时间：
2016-08-05 17:36:04
阅读次数：
215
最近在使用python做接口测试，发现python中http请求方法有许多种，今天抽点时间把相关内容整理，分享给大家，具体内容如下所示： 一、python自带库 urllib2 python自带库urllib2使用的比较多，简单使用如下： import urllib2 response = urll ...
分类：
编程语言 时间：
2016-08-05 11:50:52
阅读次数：
149
#!/usr/bin/envpython2.7
#coding=utf-8
fromzabbix_apiimportZabbixAPI
importurllib2
importsys
###getvisible_name
inet_ip=sys.argv[1]
url=‘http://10.47.102.185/api/ecs/?ip={0}‘.format(inet_ip)
response=urllib2.urlopen(url)
result=response.read()
info=eval(resu..
1、基本抓取网页 2、使用代理IP 在开发爬虫过程中经常会遇到IP被封掉的情况，这时就需要用到代理IP； 在urllib2包中有ProxyHandler类，通过此类可以设置代理访问网页，如下代码片段： 3、Cookies处理 cookies是某些网站为了辨别用户身份、进行session跟踪而储存在用 ...
分类：
编程语言 时间：
2016-07-21 12:21:50
阅读次数：
134
1. Open arbitrary resources by URL; arbitrary这个词儿用的真好 2. urllib和urllib2部分类似 1）可以请求本地文件，a. getcode返回None b.读取文件内容 c.info返回文件相关信息 2）在环境变量中可以设置代理 ...
分类：
Web程序 时间：
2016-07-19 13:34:25
阅读次数：
160
urllib2是一个不错的HTTP访问库，但是API的设计太理性化，导致人类这个生物使用会遇到各种综合头疼。 Requests诙谐又有趣的介绍如下： Requests 唯一的一个非转基因的 Python HTTP 库，人类可以安全享用。 警告：非专业使用其他 HTTP 库会导致危险的副作用，包括：安 ...
分类：
编程语言 时间：
2016-07-16 22:54:00
阅读次数：
170
简单的使用urllib2获取一个网页。 注意：在上面代码的第4行是：response.read()，response对象有一个read方法，可以返回获取到的网页内容。 如果不加read，结果是： ...
分类：
编程语言 时间：
2016-07-11 21:19:01
阅读次数：
188
