一、背景 目前百度爬虫爬取业务总是按照自己的性能进行抓取客户数据，从来不考虑客户端的网络承受能力，导致客户端网络带宽超出预算范围，因此在客户端方面针对百度的无限制抓取采取相应的策略。 二、解决方案： 1、单独用一个公网IP承载百度抓取业务。例：123.103.77.13 2、在交换机上针对IP：12 ...
分类：
其他好文 时间：
2021-06-02 18:33:16
阅读次数：
0
在开发高并发系统时有三把利器用来保护系统：缓存、降级和限流 缓存：缓存的目的是提升系统访问速度和增大系统处理容量 降级：降级是当服务器压力剧增的情况下，根据当前业务情况及流量对一些服务和页面有策略的降级，以此释放服务器资源以保证核心任务的正常运行 限流：限流的目的是通过对并发访问/请求进行限速，或者 ...
分类：
其他好文 时间：
2021-05-24 08:39:02
阅读次数：
0
某些路由器具有所谓的流量控制中具有“惩罚性限速”的功能：（例如）192.168.1.100在120秒内平均速率超过100KB/S，那么把该IP列入惩罚队列，惩罚队列速率是40KB/S. 其实，利用iptables的也可以实现类似的功能。脚本如下： iptables -t mangle -N LMT ...
分类：
其他好文 时间：
2021-02-02 11:00:48
阅读次数：
0
初级小实验 1、PC-SERVER的TELNET流量，标记为precedence 4 要求拥塞时保留带宽的10%，（100%） 执行WRED，当到达25个包时进行丢弃，概率为8分之1 带宽限速，为100KB，正常的转发，超出的丢弃 2、PC-SERVER的http流量，标记为DSCP 40 要求拥塞 ...
分类：
其他好文 时间：
2020-12-14 13:06:09
阅读次数：
3
2万字带你学习Qos原理，还有6个实验案例，建议一定要收藏！一、QoS的原理1前言2QoS模型3QoS基本原理4其他提高QoS的技术二、实验案例1、QOS字节数统计组网配置案例2、QOS数据包统计组网配置案例3、基于全局应用QOSpolicy典型组网配置案例4、基于VLAN应用QOSpolicy典型组网配置案例5、QOS之LR接口限速配置案例6、QOS之WRED典型组网配置案例一、QoS的原理1前
分类：
其他好文 时间：
2020-12-11 12:03:32
阅读次数：
2
一、前言 一般来说，我们是在windows下编写并且调通jmeter脚本，以及使用它来对接口进行基准性能测试。但是由于在公司由于网络的限制，整个公司公用100M或200M的带宽，并且每部PC的上传和下载都会限速到约3M。所以，真正压测需在linux环境下（让运维开通一个无带宽限制环境）运行，得到的性 ...
分类：
系统相关 时间：
2020-09-18 04:10:56
阅读次数：
64
1.接口测试流程：类似于功能测试流程 ①需求分析与评审 ②测试框架和技术选型 ③测试计划与评审 ④测试设计和评审 ⑤测试实现和执行 ⑥持续集成 典型 ： 测试计划 测试设计 测试实现 测试执行 2.接口测试是集成测试的一种特殊测试类型 简版测试计划 ： 测试进度计划表 任务 负责人 时间 工作量 目 ...
分类：
其他好文 时间：
2020-08-12 16:02:03
阅读次数：
90
写在前面 《Java 开发手册》是阿里巴巴集团技术团队的集体智慧结晶和经验总结，经历了多次大规模一线实战的检验及不断完善，公开到业界后，众多社区开发者踊跃参与，共同打磨完善，系统化地整理成册，当前的版本是嵩山版。 现代软件行业的高速发展对开发者的综合素质要求越来越高，因为不仅是编程知识点，其它维度的 ...
分类：
编程语言 时间：
2020-08-04 16:50:55
阅读次数：
85
开发高并发系统时有三把利器用来保护系统：缓存、降级和限流。API网关作为所有请求的入口，请求量大，我们可以通过对并发访问的请求进行限速来保护系统的可用性。常用的限流算法比如有令牌桶算法，漏桶算法，计数器算法等。在Zuul中我们可以自己去实现限流的功能（Zuul中如何限流在我的书《SpringCloud微服务-全栈技术与案例解析》中有详细讲解），SpringCloudGateway的出现本身就是用来
分类：
编程语言 时间：
2020-08-03 23:25:42
阅读次数：
105
网络环境，客户端是路由下面的子网掩码的ROS（也就是没有公网IP，为城域网的ROS），服务端是具有公网IP的ROS。 该文章可以解决运营商对于只有城域网IP的ROS，对于各种隧道协议全部限速的问题，具体限速情况，可以看我其他的文章： https://www.cnblogs.com/itfat/p/1 ...
分类：
其他好文 时间：
2020-07-28 14:17:35
阅读次数：
91
