记录这个就是方便自己以后查看！！！nginx按天切割日志脚本示例如下#!/bin/bash
logs_path="/usr/local/openresty/nginx/logs/"
pid_path="/usr/local/openresty/nginx/logs/nginx.pid"
mv${logs_path}access.log${logs_path}access_$(date-d"yesterday"+"%Y%m%d").log
gzip${l..
分类：
其他好文 时间：
2016-06-30 23:35:45
阅读次数：
288
#!/bin/bash # Author: Wang Xiaoqiang # ReadMe: Nginx access log split script # crontab -e # 59 23 * * * sh /script/nginx_split.sh LOG_PATH='/usr/local ...
分类：
其他好文 时间：
2016-06-30 18:04:07
阅读次数：
105
Linux日志文件如果不定期清理，会填满整个磁盘。这样会很危险，因此日志管理是系统管理员日常工作之一。我们可以使用”logrotate”来管理linux日志文件，它可以实现日志的自动滚动，日志归档等功能。下面以nginx日志文件来讲解下logrotate的用法。在/etc/logrotate.d/目录下创..
分类：
其他好文 时间：
2016-06-29 15:59:52
阅读次数：
240
shell脚本vi/home/crontab/cut_nginx_log.sh#编辑
#!/bin/sh
logs_path="/usr/local/nginx/logs/"
DAYS=7
mv${logs_path}bbs_access.log${logs_path}nginx_logs/bbs_logs/bbs_access_$(date-d"yesterday"+"%Y%m%d").log
mv${logs_path}sns_access.log${logs_path}nginx_logs/sn..
分类：
其他好文 时间：
2016-06-17 01:04:05
阅读次数：
208
logstash配置文件#nginx_log.confinput{file{type=>"nginx_log"path=>"/opt/nginx/logs/access.log"}}filter{if[type]=="nginx_log"{grok{match=>{"message"=>"%{NGINXACCESS}"}}if([message]=~"^*launcher*|^*favicon*"){drop{}}geoip{source=>"remote_addr"ta..
分类：
其他好文 时间：
2016-06-16 13:28:06
阅读次数：
443
利用 crontab + shell 来实现nginx的 access log 按天切割，便于统计。具体实现如下： shell： crontab： ...
分类：
其他好文 时间：
2016-06-14 15:44:45
阅读次数：
172
*目的是为了防采集。需要对网站的日志信息，进行一个实时的IP访问监控。1、kafka版本是最新的0.10.0.02、spark版本是1.613、下载对应的spark-streaming-kafka-assembly_2.10-1.6.1.jar放到spark目录下的lib目录下4、利用flume将nginx日志写入到kafka（后续补充）5、编写python..
分类：
Web程序 时间：
2016-06-13 19:28:08
阅读次数：
1223
nginx的ngx_http_log_module模块是用来定义请求日志格式（编译时添加）配置段:http常用log_format指令：$remote_addr,$http_x_forwarded_for记录客户端IP地址$remote_user记录客户端用户名称$request记录请求的URL和HTTP协议$status记录请求状态$body_bytes_sent发送给客户端的..
分类：
其他好文 时间：
2016-06-12 18:47:31
阅读次数：
246
编写脚本:vim/usr/local/sbin/logrotate.sh//加入#!/bin/bashd=`date-d"-1day"+%F`[-d/tmp/nginx_log]||mkdir/tmp/nginx_logmv/tmp/access.log/tmp/nginx_log/$d.log/etc/init.d/nginxreload2>/dev/nullcd/tmp/nginx_log/gzip-f$d.log#!/bin/bashdatedir=`date+%Y%m%d`/bin/..
分类：
其他好文 时间：
2016-06-08 17:14:45
阅读次数：
168
Nginx日志轮询切割默认情况下，Nginx会把所有的访问日志生成到一个指定的访问日志文件access*.log里，但这样一来，时间长了就会导致日志单个文件很大，不利于日志的分析和处理，因此有必要对Nginx日志按天或者按小时等进行分割，具体要看具体线上业务，使其分成不同的文件保存..
分类：
其他好文 时间：
2016-06-07 16:36:46
阅读次数：
254
