网站的日志文件随着每天的访问记录积累,会越来越大,特别是大型网站。
日志越来越大不仅影响储存容量从而影响网站性能,而且对我们做日志分析造成困难。
因此,我要对日志进行规范整理。
方法一:使用rotatelogs实现log轮转
rotatelogs是一个配合Apache管道日志功能使用的简单程序。
PS:管道日志功能
Apache提供了不把日志直接写入文件,而是通过管道发送给另外一个程序的能力。这样就大大加强了对日志进行处理的能力。这个通过管道得到的程序可以是任意程序,如日志分析、压缩日志等。要实现将日志写到管道的操作,只需要将配置中日志文件部分的内容替换为"|程序名"即可,例如:
# compressed logs $ CustomLog "|/usr/bin/gzip -c >> /var/log/access_log.gz" common
rotatelogs语法
rotatelogs [ -l ] logfile [ rotationtime [ offset ]] | [ filesizeM ]
logfile它加上基准名就是日志文件名。如果logfile中包含"%",则它会被视为用于strftime()的格式字符串;否则它会被自动加上以秒为单位的".nnnnnnnnnn"后缀。这两种格式都表示新的日志开始使用的时间。rotationtime日志文件滚动的以秒为单位的间隔时间。offset相对于UTC的时差的分钟数。如果省略,则假定为"0"并使用UTC时间。比如,要指定UTC时差为"-5小时"的地区的当地时间,则此参数应为"-300"。filesizeM指定以filesizeM文件大小滚动,而不是按照时间或时差滚动。在 Windows 下的设置例子如下:
# 限制错误日志文件为 1M
ErrorLog "|bin/rotatelogs.exe -l logs/error-%Y-%m-%d.log 1M"
# 每天生成一个错误日志文件
#ErrorLog "|bin/rotatelogs.exe logs/error-%Y-%m-%d.log 86400"
# 限制访问日志文件为 1M
CustomLog "|bin/rotatelogs.exe -l logs/access-%Y-%m-%d.log 1M" common
# 每天生成一个访问日志文件
#CustomLog "|bin/rotatelogs.exe logs/access-%Y-%m-%d.log 86400" common
正题(实际运用操作):
修改/usr/local/apache2/conf/httpd.conf文件
把ErrorLog "logs/error_log" 用#备注了它然后
改为
ErrorLog "|/usr/local/apache2/bin/rotatelogs /usr/local/apache2/logs/%Y-%m-%d-error_log 84600 480"
把CustomLog "logs/access_log" common 用#备注了它然后
改为
CustomLog "|/usr/local/apache2/bin/rotatelogs /usr/local/apache2/logs/%Y-%m-%d-access_log 84600 480" combined
然后重启Apache:/usr/local/apache2/bin/apachectl -k restart
到logs下就可看见改变了
-rw-r--r-- 1 root root 13400 Dec 8 15:50 2016-12-08-access_log
-rw-r--r-- 1 root root 3714 Dec 8 15:50 2016-12-08-error_log
可以把access_log和error_log删除了,以后日志都是按每天生成,对日志做分析时就方便了。
然后你还可以通过crontab定期把三天前的旧日志删除。(几天前自己在下面设置好)
crontab -e
00 00 * * * /usr/bin/find /usr/local/apache2/logs/ -name ‘*_log‘ -mtime +3 -exec rm -rf {} \;
方法二:写shell脚本通过crontab定期进行备份删除重启日志操作
vim cron_log.sh
#!/bin/bash # This script run at 00:00 logs_path="/usr/local/apache2/logs/" #How much days backup most DAYS=3 #Core of script cd $logs_path DATE=`date +%Y-%m-%d-%H` SRC_FILE="access.log" TAR_FILE="access-$DATE.tar.gz" tar -czf $TAR_FILE $SRC_FILE rm -f $SRC_FILE find ./ -name "access-*" -type f -mtime +$DAYS -exec rm {} \; /usr/local/apache2/bin/apachectl -k restart exit 0;
添加到crontab中定期执行
crontab -e
00 00 * * * /usr/local/crontab/cron_log.sh
本文出自 “走在产品路上的运维dog~” 博客,转载请与作者联系!
原文地址:http://vrfxie.blog.51cto.com/11026252/1880812