相信很多公司都有使用ELK作为运维的日志分析工具,简单、方便、美观,但是却很少有人把自己的分析成果分享出来,以下为我根据公司的具体情况做的dashboard,如果有什么建议或意见欢迎在博客下方评论,以下只针对负载均衡器做了相关分析。1.总体访问情况网站大盘信息,显示的主..
分类:
其他好文 时间:
2016-07-21 11:08:25
阅读次数:
232
https://mp.weixin.qq.com/s?__biz=MjM5MDkwNjA2Nw==&mid=2650373776&idx=1&sn=e823e0d8d64e6e31d22e89b3d23cb759&scene=1&srcid=0720BzuzPl916oZWVGfiwduR&key= ...
分类:
其他好文 时间:
2016-07-20 22:53:31
阅读次数:
336
一般系统或服务生成的日志都是一大长串。每个字段之间用空格隔开。logstash在获取日志是整个一串获取,如果能日志中每个字段代表的意思分割开来在传给elasticsearch。这样呈现出来的效果将会更加好,而且也能让kibana更方便的绘制图形。Grok是Logstash最重要的插件。它的主要作..
分类:
其他好文 时间:
2016-07-20 19:52:42
阅读次数:
931
1.下载解压2.打开config/kibana.yml配置文件,修改elasticsearch的url,3.启动kibana4.在浏览器中输入http://10.0.0.5:5601/,进入Kibana配置页面。如果elasticsearch的地址配置不正确的话,会在控制台有提示,而且浏览器页面也会显示没有连接到elasticsearch。
分类:
其他好文 时间:
2016-07-20 19:51:10
阅读次数:
327
(一)Beats是什么?Beats是elasticsearch公司开源的一款采集系统监控数据的代理agent,它可以发送不同类型的数据到elasticsearch中,也可以行将采集完的数据发送到logstash中转,然后在推送到elasticsearch中,目前还在发展中,与成熟的监控系统zabbix和ganglia相比就界面看起..
分类:
其他好文 时间:
2016-07-20 13:39:52
阅读次数:
441
首先安装jdk,我这里使用open-jdk yum list all | grep jdk yum -y install java-1.8.0-openjdk-devel, java-1.8.0-openjdk.x86_64和java-1.8.0-openjdk-headless.x86_64作为依 ...
分类:
其他好文 时间:
2016-07-19 20:53:20
阅读次数:
256
1.配置log4j.propertieslog4j.rootLogger=INFO,DEBUG,logstash
log4j.appender.logstash=org.apache.log4j.net.SocketAppender
log4j.appender.logstash.Port=4560
log4j.appender.logstash.RemoteHost=10.0.0.5
log4j.appender.logstash.ReconnetionDelay=60000
log4j.appende..
分类:
其他好文 时间:
2016-07-19 19:07:06
阅读次数:
2652
输入插件是Logstash从特定的数据源读取数据,Logstash可用插件包括,详情可见这里,下面说一些常见的输入插件:stdin插件:标准的输入插件,能够从命令行中读取事件。可选配置:add_fieldhash(哈希){}codeccodec“line”tagsarray(数组)typestring(字符串)file插件:Logsta..
分类:
其他好文 时间:
2016-07-19 11:35:55
阅读次数:
401
配置文件的基本格式,输入部分,过滤器部分和输出部分。#Thisisacomment.Youshouldusecommentstodescribe
#partsofyourconfiguration.
input{
...
}
filter{
...
}
output{
...
}每个部分都可以配置一个或多个插件。下面展示的是输入部分,有两个file插件。input{
file{
path=&..
分类:
其他好文 时间:
2016-07-15 17:24:57
阅读次数:
954
上次实现了flume+kafka+hbase+ELK:http://www.cnblogs.com/super-d2/p/5486739.html 这次我们可以加上storm: storm-0.9.5简单配置如下: 安装依赖 安装 Python 安装 zookeeper wget http://mi ...
分类:
数据库 时间:
2016-07-12 13:38:43
阅读次数:
427