压力测试时候Linux系统参数的调优

有个站点，我用ab做压测，结果ab总是返回错误，我做了如下的一些调优，最后正常了。

nginx的配置

.conf:
worker_processes 32;
worker_connections 65536;

过多的TIME_WAIT

在压力中，通过netstat发现很多TIME_WAIT的连接描述符：

netstat -n | awk ‘/^tcp/ {++state[$NF]} END {for(key in state) print key,"\t",state[key]}‘

ss -ant | awk ‘NR>1 {++s[$1]} END {for(k in s) print k,s[k]}‘

一个网络连接断开后，会有30秒的TIME_WAIT时间，如果并行过大会导致连接耗尽。
通过查看/proc/sys/net/ipv4/ip_local_port_range可以知道设置的Linux内核自动分配端口的端口范围：
shell> cat /proc/sys/net/ipv4/ip_local_port_range
1025 65535
解决：
/etc/sysctl.conf
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
然后执行 /sbin/sysctl -p 让参数生效，使得连接得到复用和回收。

dmesg错误

ab返回apr_socket_recv: Connection timed out (110)
原因：dmesg查看系统错误信息显示大量nf_conntrack: table full, dropping packet，所以需要修改这个模块的参数。
解决：
vi /etc/sysctl.conf
net.nf_conntrack_max = 655360
net.netfilter.nf_conntrack_tcp_timeout_established = 1200
sysctl -p /etc/sysctl.conf