1,http日志分析#!/bin/bash
foriin$@;do
echo====================="$i"=============================>>weblog.txt
echo"IPdata">>weblog.txt
awk‘{print$1}‘$i|wc-l>>weblog.txt
awk‘{print$1}‘$i|sort|uniq-c|wc-l>>weblog.txt
echo"sokectdata"&g..
分类:
Web程序 时间:
2015-05-07 12:39:34
阅读次数:
156
分析例如以下GC日志: [GC [PSYoungGen: 9216K->1024K(9216K)] 1246196K->1246220K(1287040K), 0.2398360 secs] [Times: user=0.29 sys=0.01, real=0.24 secs] [...
分类:
编程语言 时间:
2015-05-07 11:47:37
阅读次数:
128
参照http://nkcoder.github.io/blog/20141031/elkr-log-platform-deploy/此作者搭建环境过程。借一张图:搭建版本为:Elasticsearch:1.5.2Logstash:1.4.2Kibana:4.0.2Shipper节点配置如下:inpu...
分类:
其他好文 时间:
2015-05-05 01:19:18
阅读次数:
133
grok-patterns内置了很多基础变量的正则表达式的log解析规则,其中包括apache的log解析(同样可以用于nginx的log解析)。基于nginx日志分析配置:1.配置nginx日志格式如下:log_format main '$remote_addr [$time_local]'' "...
分类:
其他好文 时间:
2015-05-04 17:51:28
阅读次数:
190
我的新书《UNIX/Linux网络日志分析与流量监控》,在全国图书订货会-机械工业出版社展台《UNIX/Linux网络日志分析与流量监控》
分类:
其他好文 时间:
2015-04-30 20:28:01
阅读次数:
126
http://bughd.com/doc/indexBugHD 用户使用手册一.登录/注册如果你已经有 FIR.im 的账号,可以使用 FIR.im 的账号直接登录二.创建一个项目在项目列表,点击“创建项目”输入项目名称,选项项目的应用类型获取到 general_key,用于配置 SDK。三.集成S...
分类:
其他好文 时间:
2015-04-30 17:31:30
阅读次数:
179
网站日志分析项目案例(一)项目介绍:http://www.cnblogs.com/edisonchou/p/4449082.html网站日志分析项目案例(二)数据清洗:http://www.cnblogs.com/edisonchou/p/4458219.html网站日志分析项目案例(三)统计分析:...
分类:
Web程序 时间:
2015-04-29 07:05:09
阅读次数:
195
概述我们日常应用中都离不开日志。可以说日志是我们在排查问题的一个重要依据。但是日志并不是写了就好了,当你想查看日志的时候,你会发现线上日志堆积的长度已经超越了你一行行浏览的耐性的极限了。于是,很有必要通过一些手段来高效地辅助你来快速的从日志中找到你要找的问..
分类:
其他好文 时间:
2015-04-28 00:10:49
阅读次数:
269
网站日志分析项目案例(一)项目介绍:http://www.cnblogs.com/edisonchou/p/4449082.html网站日志分析项目案例(二)数据清洗:http://www.cnblogs.com/edisonchou/p/4458219.html一、数据情况分析1.1 数据情况回顾...
分类:
Web程序 时间:
2015-04-26 21:11:50
阅读次数:
202
摘自《大型分布式网站架构设计与实践》 4.1在线日志分析1.基础命令操作命令说明查看文件的内容cat-naccess.log-n显示行号分页显示文件moreaccess.logEnter下一行,空格下一页,F下一屏,B上一屏分页显示文件lessaccess.log输入/字符串可查找并高亮显示文件尾t...
分类:
其他好文 时间:
2015-04-25 15:04:06
阅读次数:
156