Requests库是第三方模块,需要额外进行安装。Requests是一个开源库 去GitHub下载回来,进入解压文件,运行setup.py 比urllib2实现方式的代码量少,下面是POST请求: 下面是get请求,但有些get请求url包含参数,如:www.xxx.com?keyword=bolg ...
分类:
其他好文 时间:
2018-08-02 02:04:01
阅读次数:
680
按照以往版本安装 Charles 自签名根证书 Mac 上启动 Charles,在同一个局域网内,把 iOS 设备的代理设置到 Mac机的 Charles 代理端口上。假定 Mac 机 IP 为192.168.1.10,Charles 的默认端口号为 8888,则设置到192.168.1.10:88 ...
分类:
移动开发 时间:
2018-07-27 19:25:15
阅读次数:
153
方法一 brew用curl下载,所以给curl挂上socks5的代理即可。 在~/.curlrc文件中输入代理地址即可。 socks5 = "127.0.0.1:1080" 方法二:替换源 替换为中科大源 替换brew.git: cd "$(brew --repo)" git remote set- ...
分类:
其他好文 时间:
2018-07-20 19:31:36
阅读次数:
229
ProxyHandler处理器(代理设置) 使用代理IP,这是爬虫/反爬虫的第二大招,通常也是最好用的。 很多网站会检测某一段时间某个IP的访问次数(通过流量统计,系统日志等),如果访问次数多的不像正常人,它会禁止这个IP的访问。 所以我们可以设置一些代理服务器,每隔一段时间换一个代理,就算IP被禁 ...
分类:
编程语言 时间:
2018-07-14 14:52:23
阅读次数:
273
国内去Maven repo : https://repo.maven.apache.org 下载依赖包的速度 有时候挺渣渣的。如何设置Nexus,从而提升下载速度,快速获取到项目的依赖包呢? 这里教大家把Nexus的代理设置成阿里云的。 访问你的Nexus, 如 http://localhost:8 ...
分类:
其他好文 时间:
2018-06-28 00:54:52
阅读次数:
6715
1、下载 安装 下载地址:http://httpd.apache.org/download.cgi 将apache 安装到某个目录中 修改conf/http.conf文件 修改配置文件端口 (端口为你本地项目的端口号) 修改配置文件端口 60行 :Listen 3000 第38行 修改apache的 ...
分类:
Web程序 时间:
2018-06-21 18:26:18
阅读次数:
355
1、首先确保手机与电脑连接的是同一局域网 2、在电脑端命令行中输入 ipconfig 找到ip地址 3、打开fiddler->Tools->Options->Connection,确保单选框勾选,并且记住图中的端口号 4、设置代理 设置->无线局域网->配置代理,填写服务器和端口号,点击存储 5、打 ...
分类:
移动开发 时间:
2018-06-13 15:23:38
阅读次数:
234
urllib库作为基本库,requests库也是在urllib库基础上发展的 但是urllib在使用上不如requests便利,比如上篇文章在写urllib库的时候,比如代理设置,处理cookie时,没有写,因为感觉比较繁琐,另外在发送post请求的时候,也是比较繁琐。 一言而代之,requests ...
分类:
其他好文 时间:
2018-06-09 15:59:08
阅读次数:
127
修改代理,需要进入下图文件中 打开,自定义代理类 打开settings.py文件 激活代理中间件 ...
分类:
其他好文 时间:
2018-06-09 13:24:02
阅读次数:
134
1 from urllib import request# 1 使用Proxyhandler 传入构建handler 2 handler=request.ProxyHandler({'http':'10.0.0.1:8080'})# 2 使用创建的handler 构建一个opener 3 opene... ...
分类:
其他好文 时间:
2018-05-31 13:20:36
阅读次数:
189