1.http请求参数分离请求url一般携带了一些业务参数，因为业务将token拼接到url的参数中，单独将其解析出来，可以用于用户行为分析，因此，基于logstash的kv进行处理。kv{ source=>"request" field_split=>"?"}2.垃圾日志清理静态页面里面...
分类：
其他好文 时间：
2015-05-29 21:42:20
阅读次数：
205
1最小化安装(自定义选包：最基本为：Bash;Compatibilltylibrarles;DebuggingTools;Developmenttools)最小化启动：foroldboyin`chkconfig--list|grep"3:on"|awk‘{print$1}‘|grep-vE"crond|network|sshd|rsyslog|xinetd"`;dochkconfig$oldboyoff;done2ulimit:ulimit-n如果系统进..
分类：
系统相关 时间：
2015-05-27 01:05:47
阅读次数：
323
如题，分析首先最简单的取出ipcd/usr/local/nginx/logs
awk‘{print$1}‘access.log|sort|uniq-c|sort-rn|head-n50|awk‘{print$2}‘>/root/list
#在nginx/apache下执行上述代码。把ip写到list列表然后思路就是把每个ip的来源地分析出来，我用的淘宝的ip数据库，还是不错的#!/bi..
分类：
数据库 时间：
2015-05-26 19:05:22
阅读次数：
334
#!/usr/bin/envpthon
#_*_coding=utf-8_*_
#python版本（nginx日志切割脚本）
importos
importdatetime
#access.log路径
accesslogs_path="/usr/local/nginx/logs/"
#昨天的日期
lastDate=datetime.date.today()-datetime.timedelta(days=1)
#备份路径
bak_path="%s%s/%s/"%(..
分类：
编程语言 时间：
2015-05-26 16:28:29
阅读次数：
345
每天凌晨运行切割日志的shell脚本
10 00* * * /bin/bash /usr/local/nginx/sbin/cut_nginx_log.sh
脚本如下
#!/bin/bash...
分类：
其他好文 时间：
2015-05-26 12:43:07
阅读次数：
138
nginx的日志文件没有rotate功能。如果你不处理，日志文件将变得越来越大，还好我们可以写一个nginx日志切割脚本来自动切割日志文件。第一步就是重命名日志文件，不用担心重命名后nginx找不到日志文件而丢失日志。在你未重新打开原名字的日志文件前，nginx还是会向你重命名的文件写日志，linu...
分类：
Web程序 时间：
2015-05-25 18:38:14
阅读次数：
650
openstack,swift的log不输出了。trouble shooting过程 ，发现我们的程序 /var/log/swift/proxy.log等总是不输出log。因为log rsyslog控制，所以这些log应该是 rsyslog进程打开lsof -p rsyslog 发现没有打开这些文件...
分类：
其他好文 时间：
2015-05-21 21:58:12
阅读次数：
170
openstack,swift的log不输出了。trouble shooting过程 ，发现我们的程序 /var/log/swift/proxy.log等总是不输出log。因为log rsyslog控制，所以这些log应该是 rsyslog进程打开lsof -p rsyslog 发现没有打开这些文件...
分类：
其他好文 时间：
2015-05-21 19:19:12
阅读次数：
121
Corosync+Pacemaker+Ldirectord+Lvs+Httpd一、硬件环境4台虚拟机在同一网段操作系统：centos6.3关闭系统不必要的服务脚本#!/bin/bash
services=`chkconfig--list|cut-f1|cut-d""-f1`
forserin$services
do
if["$ser"=="network"]||["$ser"=="rsyslog"]||["$ser"=="sshd"]||["$s..
分类：
Web程序 时间：
2015-05-21 12:56:10
阅读次数：
319
一：什么是日志所谓的日志，就是记录过去发生的事情，在Linux中可以使用日志功能对过去发生的事件进行记录，方便日后对服务器的运行状况进行分析。二：Rsyslog相关介绍Linux中日志按照其记录的类型可分为系统日志（syslog）和内核日志（klog），而记录的方式通常也有两种，就是..
分类：
其他好文 时间：
2015-05-20 15:05:08
阅读次数：
201
