概要 实现思路 使用方法 启动队列服务 使用队列服务 概要 在调用第三方 API 的时候, 基本都有访问限速的限制条件. 第三方的 API 有多个的时候, 就不太好控制访问速度, 常常会导致 HTTP 429(Too Many Requests) 然后就会有一段时间的禁止访问. 为了应对这种限速的情 ...
一、简介 1、robot协议（爬虫协议）：这个协议告诉引擎哪些页面可以抓取，哪些不可以 -User-agent:爬虫引擎 -allow:允许robot访问的URL -disallow:禁止访问的URL 2、爬虫约束：过快/频繁的网络爬虫会对服务器产生巨大的压力，网站可能封锁你的IP，或者采取法律行动 ...
分类：
其他好文 时间：
2020-05-18 20:43:39
阅读次数：
74
nginx的日志 禁止访问 反向代理 起到保护网站安全的作用 可以缓存静态文件 实现负载均衡 F5 A10 lvs haproxy nginx 权重 weight ip_hash 每个请求的ip做hash运算，这样每个固定的访客都会被负载到后端固定的机器 backup 当前面的都访问不到，则请求ba ...
分类：
其他好文 时间：
2020-04-21 09:22:49
阅读次数：
59
问题1、单进程、线程、协程的区别？ 单进程：操作系统分配资源的最小单位，是一个程序的动态执行，有各自的地址空间，不同进程中使用的变量是各自独立，且互相不能访问的，进程中的变量存在各自的地址空间中，互相禁止访问。（由操作系统调度） 线程：是cpu运行的最小单位，进程至少会有一个线程，也可以多个线程，他 ...
分类：
编程语言 时间：
2020-03-28 16:28:49
阅读次数：
87
初次使用win 2008 r2配置IIS服务 点击打开网站会出现这种情况 这种情况就是并没有配置默认文档 直接打开网址 只需要配置一下默认文档即可 将自己写的.html文件添加在这里即可。 另外启用32位应用程序 设为 TRUE ：https://zhidao.baidu.com/question/ ...
操作系统现代计算机系统由一个或多个处理器、主存、打印机、键盘、鼠标、显示器、网络接口以及各种输入/输出设备构成。然而，程序员不会直接和这些硬件打交道，而且每位程序员不可能会掌握所有计算机系统的细节，这样我们就不用再编写代码了，所以在硬件的基础之上，计算机安装了一层软件，这层软件能够通过响应用户输入的 ...
分类：
其他好文 时间：
2020-03-03 10:55:36
阅读次数：
86
如果想要取消表单的CSRF防护，可以在模板上删除{% csrf_token %}, 并且在相应的视图函数中添加装饰器@csrf_exempt, 代码如下： from django.views.decorators.csrf import csrf_exempt @csrf_exempt def re ...
分类：
其他好文 时间：
2020-02-28 13:49:25
阅读次数：
322
1.可用性 学习通用户访问量集中且巨大时，服务器会崩溃 2.可修改性 博客圆可以自定义样式 3.性能 淘宝网在双十一时，服务器可承受巨量的访问 4.安全性 网站禁止访问后台数据 5.可测试性 开发人员在开发时可进行测试 6.易用性 界面美观易懂 ...
分类：
其他好文 时间：
2020-02-23 21:51:10
阅读次数：
79
let xmlHttp = new XMLHttpRequest();//创建发送请求的对象 //这是为了兼容IE的获取ajac请求对象的方法 // let getXmlHttpRequest = function () { // if (window.XMLHttpRequest) { // // ...
分类：
Web程序 时间：
2020-02-20 15:18:45
阅读次数：
73
在Linux中添加ftp用户，并设置相应的权限，操作步骤如下： 1、环境：ftp为vsftp。被限制用户名为test。被限制路径为/home/test 2、建用户：在root用户下： useradd -d /home/ftp ftpname //增加用户test，并制定ftpname用户的主目录为/ ...
分类：
系统相关 时间：
2020-02-19 19:02:54
阅读次数：
840
