一、原理：nginx防止网站资源被盗用模块ngx_http_referer_module?HTTPReferer是Header的一部分，当浏览器向Web服务器发送请求的时候，一般会带上Referer，告诉服务器我是从哪个页面链接过来的，服务器借此可以获得一些信息用于处理，例如防止未经允许的网站盗链图片、文件等。因此HTTPReferer头信息是可以通过程序来伪装生成的，所以通过Referer信息防
分类：
系统相关 时间：
2019-09-08 16:44:44
阅读次数：
123
Apache配置文件：httpd.conf文件 https://www.cnblogs.com/cqmy/p/6208656.html https://www.cnblogs.com/hh1137054072/p/7612652.html ...
分类：
编程语言 时间：
2019-09-07 10:38:03
阅读次数：
114
常见的反爬机制及处理方式 1、Headers反爬虫 ：Cookie、Referer、User-Agent 解决方案: 通过F12获取headers,传给requests.get()方法 2、IP限制 ：网站根据IP地址访问频率进行反爬,短时间内进制IP访问 解决方案: 1、构造自己IP代理池,每次访 ...
分类：
Web程序 时间：
2019-09-04 20:56:58
阅读次数：
154
一：针对不同的文件类型 location ~* \.(gif|jpg|png|swf|flv)$ { valid_referers none blocked www.jzxue.com jzxue.com ; if ($invalid_referer) { rewrite ^/ http://www ...
分类：
其他好文 时间：
2019-08-27 17:22:57
阅读次数：
103
Nginx：操作实例keepalived+Nginx实现高可用corosync+NginxNginxweb服务器反向代理webmail模块化设计架构SSI以及图像缩放nginx热部署平滑升级referer反盗链机制Tenine淘宝二次开发varnish缓存服务器，squid(出现时间比较长的缓存服务器)nginx：cache(disk)httpd：cache(disk,memory)Nginx高度
分类：
其他好文 时间：
2019-08-27 14:20:39
阅读次数：
127
1.web资源防盗链 盗链概念 盗链是指在自己的页面上展示一些并不在自己服务器的内容 防盗链工作原理 通过referer或者签名，网站可以检测目标网页访问的来源页，一旦检测到来源页不是本站即进行阻止或者返回指定页面 解决方案1 Referer nginx 模块ngx_http_referer_mod ...
分类：
其他好文 时间：
2019-08-27 00:51:17
阅读次数：
87
认识HTTP、HTTPS 1.http:超文本传输协议 以明文的形式传输 效率更高，但是不安全 2.https:http+ssl（安全套接字层） 传输之前数据先加密，之后解密获取内容 效率低，但是安全 3.get请求和post请求的区别 get请求没有请求体，post有，get请求把数据放到url地 ...
分类：
其他好文 时间：
2019-08-26 23:18:29
阅读次数：
190
发送get,post请求，获取响应 安装requests模块： pip install requests response=requests.get(url,headers={})#发送get请求，请求url地址对应的响应 response=requests.post(url,headers=,{} ...
分类：
其他好文 时间：
2019-08-26 22:55:22
阅读次数：
96
概述: Bootstrap 是最受欢迎的 HTML、CSS 和 JS 框架，用于开发响应式布局、移动设备优先的 WEB 项目。 作用: 开发响应式的页面 响应式:就是一个网站能够兼容多个终端 节约开发成本,提高开发效率 入门: 下载BootStrap www.bootcss.com 官网地址 模版 ... ...
分类：
编程语言 时间：
2019-08-17 12:34:25
阅读次数：
63
爬虫流程 发送请求--获得数据--解析数据--存储数据 用于解析数据库 bs4 pyquery re 请求特别关心 URL method Header: Cookie 存储 Referer上一次跳转 User-Agent请求头 响应特别关心 不要把status 作为请求是否成功的结果 处理发送请求的 ...
分类：
其他好文 时间：
2019-08-07 21:02:41
阅读次数：
86
