标签：调优服务器
1、系统故障排除思路
重视报错信息
永远不要忘记日志文件
分析、定位、解决问题
2、影响linux性能的因素
服务器硬件因素
操作系统的相关因素
程序因素
3、系统性能优化工具
Cpu性能优化工具 vmstat，iosta，sar
内存性能检测工具 free,top,sar,pidstat
磁盘性能评估工具 iostat,sar
网络性能分析工具 ping,mtr,netstat
4、系统性能分析与标准
5、性能调优的思路与技巧分享
几个故障鼓励案例和性能优化案例
Su命令切换用户导致的问题
磁盘突然变成只读怎么处理
基于动、静态网站的优化案例
1、重视报错提示信息
每个错误的出现，都是给出错误提示信息，一般情况下这个提示基本定位了问题所在，因此一定要重视这个报错信息，如果对这些错误信息视而不见，问题永远得不到解决。
2、永远不要忘记日志文件
日志排查问题的第一思路，一定要学会查看日志的习惯。
系统日志：dmesg、/var/log/messages、/var/log/secure（登录日志文件）
应用日志：
Apache：$APACHE_BASE/logs/error_log $APACHE_BASE/logs/access_log
Nginx：$NGINX_BASE/logs/error_log $NGINX_BASE/logs/access_log
Tomcat: $TOMCAT_BASE/logs/catalina.out
3、分析，定位问题，解决问题
综合分析过程，要以日志为导向，配合应用环境，根据报错信息，排除故障。
4、网络故障排除思路
（1）网络硬件传输问题
（2）检查网卡是否能正常工作，可以从网卡是否正常加载，网卡IP设置是否正确
（3）检查DNS是否设定正确
（4）服务是否正常工作
（5）访问权限是否打开（iptables/selinux）
（6）局域网主机之间联机是否正常
1、系统硬件资源
（1）CPU
如何判断多核CPU与超线程
消耗CPU的业务：动态web服务、mail服务
（2）内存
物理内存与swap的取舍
选择64位与Linux系统
消耗内存的业务：内存数据库（redis/hbase/mongdb）
(3)磁盘IO
RAID 技术（RAID 0/1/5/01/10）
SSD 磁盘
消耗磁盘的业务：数据库服务器
（4）网络带宽
网卡/交换机的选择
操作系统的双网卡绑定
消耗带宽的业务：hadoop平台、视频业务的平台
2、操作系统相关资源
（1）系统安装优化
磁盘分区、RAID设置、swap设置
（2）内核参数优化
Ulimit -n（最大打开文件数）
Ulimit -u (最大用户数)
（3）文件系统优化
Ext2：linux下标准文件系统，无日志记录（inode）功能
Ext3:在ext2基础上增加了日志记录功能(inode），仅支持3200个子目录
Ext4：在ext3的后续版本、linux2.6.28内核开始支持，无限子目录支持，快速fsck
Xfs:高性能文件系统，linux3.10内核开始默认支持
建议：
读操作频繁，同时小文件众多的应用，首选ext4文件系统，接下来是xfs、ext3
写操作频繁的应用，首选是xfs，接下来依次是ext4和ext3
对性能要求不高、数据安全要求不高的业务、ext3是比较好的选择
1、cpu性能评估工具
（1）vmstat(系统自带工具)
利用vmstat命令可以对操作系统的内存信息、进程状态、CPU活动等
常用方式：vmstat 3 5
表示每3秒更新一次输出信息，统计5秒后停止输出
（2）iostat（需要安装sysstat工具包）
Iostat是I/O statistics（输入/输出统计）的缩写，主要的功能是对系统的磁盘I/O操作进行监视
常用方式：iostat -c 3 5
其中，-c表示显示CPU的使用情况，-d：显示磁盘的使用情况
（3）uptime命令
Uptime是监控系统性能最常用的一个命令，主要用来统计系统当前的运行状况，输出的信息依次为：系统现在的时间、系统上次开机到现在运行了多长时间、系统目前有多少登录用户、系统在一分钟内、五分钟内、十五分钟内的平均负载。
2、内存性能评估
（1）free命令
Free命令是监控linux内存使用状况最常用的指令
常见用法： free -m
（2）sar/pidstat
此两个命令主要用于监控全部或指定进程占用系统的情况，如CPU，内存、设备IO。
此三个共用参数：-(获取CPU状态)、-r（获取内存状态）、-d（获取磁盘）
常用组合：
Sar -u 3 获取cpu3秒内的状态
Pidstat -r -p 1 3获取内存3秒内的状态(获取指定的进程id)
3、网络性能评估
（1）ping命令
（2）Netstat 命令
Netstat -i(查看网络接口情况)
Netstat -r(查看路由情况)
（3）mtr/traceroute 命令
跟踪网络路由状态，推荐使用mtr，动态跟踪网络路由，用于排除网络问题十分方便
影响性能因素评判标准
好坏 糟糕
CPUuser%+sys%<70%user%+sys%=85user%+sys%>=90
内存Swap IN（si）=0Per CPU with 10 page/sMoreSwap In & Swap Out
Swap Out(so)=0
磁盘iowait%<20%iowait%=35%iowait%>=50
1、系统ing无法执行su操作
问题现象：
Su : warning :cannot change directory to /home/people:Permission denied
Su:/bin/bash:Permission denied
解决思路：
从上面错误提示可知是权限出现了问题，那么可以从权限入手进行排查，基本思路如下：
用户目录/home/people权限问题
Su 程序执行权限问题 ll /bin/su
程序依赖的共享库权限的问题 ldd /bin/su
Selinux问题导致 getentforce
系统根空间问题
最终解决方法：
发现根目录的权限问题
（注意解决思路）
2、”Read-only file system” 问题分析与解决
问题现象：网站无法添加内容
解决思路：
网站程序可能出现问题
磁盘出现问题
文件系统问题
解决方法：
卸载磁盘分区，用fsck命令修复磁盘分区
3、基于动态、静态内容结合的网站优化案例
硬件：DELL R710 3台，32GB内存、CPU 2颗8核、磁盘 SATA 600GB+2TB
软件环境：nginx+tomcat 架构，通过nginx做负载均衡
现象描述：平时访问量小时，网站正常，当访问量稍大时，网站访问很慢，网站搞活动时，基本处于无法打开状态，而nginx服务器带宽占最高在30M左右，后端2个tomcat服务器占用带宽占用也在30M左右
分析问题：
（1）硬件、系统方面
（2）网络方面
（3）软件架构方面
（4）程序配置方面
步骤：分发用户请求-网站动静资源分离
解决问题：
(2) 网站动、静态分离
Location ~*\.(gif|jpg|png|js|css)${
Root /data/static/images/ROOT;
}
Nginx 中的location匹配规则
首先匹配=，其次匹配^~，然后是按文件中顺序的正则匹配，最后是交给/通用匹配。当匹配成功时候，停止匹配，按当前匹配规则处理请求
（3）Tomcat JVM参数优化
优化参数：
-server -Xms3550m -Xmx3550m -Xmn1g -XX:PermSize=256m -XX:MaxPermSize=512m
整个堆内存大小 = 年轻代大小 + 年老代大小 + 持久代大小
-Xms3550m：设置JVM最大内存3550m
-Xmx3550m：设置JVM初始堆内存3550M
-Xmn2g：设置堆内存年轻代大小为2G.。整个堆内存大小 = 年轻代大小 + 年老代大小 + 持久代大小。持久代一般固定大小为64m，所以增大年轻代后，将会减小年轻待大小。此值对系统性能影响较大
-XX：PermSize=256m :设置堆内存持久代初始值为256m
-XX：MaxPermSize=512m：设置持久代最大值为512m
学习心得：
对于调优线上服务器的原则就是结合业务的需求，对发生的问题要结合日志解决问题，查找根源发生的问题。解决问题时需要注重思路的养成，方便以后处理相关类似问题。
本文出自 “Linux系统运维” 博客，请务必保留此出处http://mbb97.blog.51cto.com/13129388/1955994
标签：调优服务器
原文地址：http://mbb97.blog.51cto.com/13129388/1955994
