基本介绍程序开发者常常要分析程序日志，包括自己打印的日志及使用的其他软件打印的日志，如php,nginx日志等，linux环境下分析日志有一些内置命令能够使用，如grep,sort,uniq,awk等，当中最强大的是awk，是作为一门小巧的文本处理语言存在的，但由于它是一门语言，功能强大，但在命令行...
分类：
数据库 时间：
2014-07-22 22:39:55
阅读次数：
374
#!/usr/bin/perl
#?name:?logcalc.pl
#?calc?the?amount?of?access?url
use?strict;
use?warnings;
use?diagnostics;
use?File::Basename;
my?($arg,?$arg_only);
my?$FILE;
my?($year,?$mo...
分类：
其他好文 时间：
2014-07-22 08:13:36
阅读次数：
221
#!/bin/sh
if [ -r $1 ]; then
? ? #Delete Baiduspider
? ? baidu=$(grep -c ‘Baiduspider‘ $1)
? ? if [ $baidu -gt 0 ]; then
? ? ? ? sed -i ‘/Baiduspider/d‘ $1
? ? ? ? echo "match Baidus...
分类：
其他好文 时间：
2014-07-21 10:19:23
阅读次数：
259
日志分析界面：logstash（分析端）+elashsearch（存储端）+kibana（展示端）工具：进行数据整理statsd1、diamond-->statsd-->graphite2、实时收集数据的做法：logstash-->statsd-->graphite日志收集可视化(LEK)：logstash+elasticsearch+kibanalegend:logstash--》..
分类：
其他好文 时间：
2014-07-20 23:38:43
阅读次数：
696
nodejsnpminstall安装环境logstash日志分析，图形界面展示小的搜索引擎，图形界面展示ruby开发的工具，封装成java环境的jar包logstash分析读日志从后往前读实时elasticsearch存储kibana展示web页面java-jarlogstash-1.3.2-flatjar.jaragent-flogstash.conf--webhttp://192.168...
分类：
其他好文 时间：
2014-07-17 08:09:54
阅读次数：
441
日志的分离1）初学syslogvoidopenlog(constchar*ident,intoption,intfacility);voidsyslog(intpriority,constchar*format,...);voidcloselog(void);facilityThefacilityargumentisusedtospecifywhattypeofprogramisloggingthemessage.Thisletstheconfigurationfilespecifythatm..
分类：
其他好文 时间：
2014-07-10 18:03:51
阅读次数：
386
程序开发人员经常要分析程序日志，包括自己打印的日志及使用的其它软件打印的日志，如php,nginx日志等，linux环境下分析日志有一些内置命令可以使用，如grep,sort,uniq,awk等，其中最强大的是awk，是作为一门小巧的文本处理语言存在的，但由于它是一门语言，功能强大，但在命令行下使用并不那么方便，因为awk是面向计算而不是面向统计的。awk可以定义变量，可以进行计算，命令行下就是一...
分类：
数据库 时间：
2014-07-09 13:02:58
阅读次数：
279
rsyslog是强大而小巧的日志系统，可以汇总client的日志到server，但是其推荐的imrelp/omrelp协议在默认配置时，有端口号限制，查起来比较麻烦。中文资料这方面内容就没有，解决起来走了不少弯路。希望给大家借鉴一下。...
分类：
其他好文 时间：
2014-07-09 12:26:27
阅读次数：
310
（1）取消将日志记录在/var/log/messages目录中默认会也将haproxy日志记录在/var/log/message中，要去掉。#vi/etc/rsyslog.conflocal3.*/var/log/haproxy.loglocal0.*/var/log/haproxy.log*.info;mail.none;authpriv.none;cron.none;local3.none/var/log/messages（2）haproxy..
分类：
其他好文 时间：
2014-07-08 08:20:44
阅读次数：
478
一.server端1.vim /etc/rsyslog.conf--------------------------------------编辑日志系统接收配置文件 # Provides TCP syslog reception $ModLoad imtcp $InputTCPServerRu...
分类：
其他好文 时间：
2014-06-30 23:11:02
阅读次数：
285
