先说网络爬虫为何要换IP，由于很多网址都会对网络爬虫行为采取识别，如果认定你的行为是网络爬虫，便会锁死你的IP，造成网络爬虫抓取不了信息，防止反爬虫的办法有很多，比如说降低采集速度，或是换IP来躲避网址的检测，故而顺利进行采集工作。但是首选便是采用高效优质代理IP。 再说什么是HTTP代理：超文本传 ...
分类：
Web程序 时间：
2020-05-25 17:48:31
阅读次数：
88
昨天介绍了下微软的反向代理库YARP，今天准备实现一个简单的Http正向代理服务器玩下。首先还是介绍下背景知识： 普通代理（Http） 在Http的时代，大部分是走的RFC 7230中描述的普通代理。这种代理扮演的是「中间人」角色，对于连接到它的客户端来说，它是服务端；对于要连接的服务端来说，它是客 ...
分类：
Web程序 时间：
2020-05-24 20:50:52
阅读次数：
101
先讲解一下什么是HTTP代理服务器：它是介于Web客户端和Web服务器之间的信息中转站。它既是Web客户端的服务器，又是Web服务器的客户端。再来说下HTTP代理有哪些？HTTP代理服务器按其所处的位置可以分成：正向HTTP代理服务器、反向代理服务器和透明代理服务器。 HTTP代理的用处： 1、突破 ...
分类：
Web程序 时间：
2020-05-23 16:42:53
阅读次数：
89
什么是代理IP，其实就是一种网络代理，能够让客户通过代理去访问想要浏览的网站。总体来说，代理服务是保护个人隐私与信息安全的好方法。近几年动态IP、HTTP代理IP在网络上被大家自建提起了解，主要原因是因为有了更多需要用到换IP的行业以及业务，需求的增加让IP代理市场逐渐火热。 代理IP软件被应用于的 ...
分类：
其他好文 时间：
2020-05-20 15:48:29
阅读次数：
148
一、whistle简介 基于Node实现的跨平台web调试代理工具，类似的工具有Windows平台上的Fiddler，主要用于查看、修改HTTP、HTTPS、Websocket的请求、响应，也可以作为HTTP代理服务器使用，不同于Fiddler通过断点修改请求响应的方式，whistle采用的是类似配 ...
分类：
其他好文 时间：
2020-05-16 20:57:42
阅读次数：
292
Nginx Nginx(“engine x”)是一款是由俄罗斯的程序设计师Igor Sysoev所开发高性能的 Web和 反向代理服务器，也是一个 IMAP/POP3/SMTP 代理服务器。和apache一样，都是web服务器软件，因为其性能优异，所以被广大运维喜欢。又因为nginx是一个轻量级的w ...
分类：
Web程序 时间：
2020-05-14 10:34:11
阅读次数：
84
前言：Jmeter录制脚本时，跟http脚本录制主要区别是：https录制需要添加安全证书。没有证书会被浏览器拦截，从而无法访问无法抓包。 一、Jmeter代理服务器及证书配置。 1、打开Jmeter，添加线程组，添加http代理服务器。 2、设置http代理服务器。 端口默认8888，为了避免跟本 ...
分类：
Web程序 时间：
2020-05-08 18:42:58
阅读次数：
190
HTTP代理是什么？现在网络信息日新月异，好多人的接触到IP，但很多人还是会发出疑问，什么是HTTP代理IP。有什么用处？ HTTP代理的原理： HTTP代理就是介于浏览器和web服务器之间的一台服务器，连接代理后，浏览器不再直接向web服务器取回网页，而是向代理服务器发出request信号，代理服 ...
分类：
Web程序 时间：
2020-05-06 18:08:16
阅读次数：
89
Fiddler是一个HTTP代理，是主流的HTTP抓包工具之一，是web调试分析的利器，这里将学习Fiddler的总结做一下记录。 ...
分类：
其他好文 时间：
2020-05-01 14:26:24
阅读次数：
82
原文:推荐一个比FiddlerCore好用的HTTP(S)代理服务器 为什么不用FiddlerCore？ 说到FiddlerCore大家可能会比较陌生，那么它哥Fiddler就比较熟悉了；抓包、模拟低带宽、修改请求我平时比较常用。Fiddler的本质就是一个HTTP代理服务器。 FiddlerCor... ...
分类：
Web程序 时间：
2020-04-27 17:20:23
阅读次数：
72
