一、系统和所需软件版本介绍系统版本:centos6.564位软件版本:jdk-8u60-linux-x64.tar.gz、elasticsearch-2.4.2.tar.gz、logstash-2.4.1.tar.gz、kibana-4.6.3-linux-x86_64.tar.gz二、安装java环境1)解压jdk软件压缩包。tar-zxvfjdk-8u60-linux-x64.tar.gz2)在/etc/profile文..
分类:
Web程序 时间:
2017-01-24 16:26:17
阅读次数:
429
logstash.conf的配置文件一、监控日志文件,匹配关键字,输出到指定文件/发送邮件。input{file{path=>["你的日志文件"]}}filter{if([message]!~"你的匹配关键字"){drop{}}if[loglevel]=="debug"{drop{percentage=>40}}}output{stdout{codec=>rubydebug}if([message]=~..
分类:
其他好文 时间:
2017-01-18 14:21:25
阅读次数:
238
开源实时日志分析ELK平台部署 时间 2015-07-21 17:13:10 51CTO推荐博文 原文 http://baidu.blog.51cto.com/71938/1676798 主题 Logstash Elastic Search 开源 时间 2015-07-21 17:13:10 51C ...
分类:
其他好文 时间:
2017-01-18 10:34:35
阅读次数:
260
1.logstash的概念及特点。概念:logstash是一个数据采集、加工处理以及传输(输出)的工具。特点: - 所有类型的数据集中处理 - 不同模式和格式数据的正常化 - 自定义日志格式的迅速扩展 - 为自定义数据源轻松添加插件 2.logstash安装配置。①.下载安装[root@node1 ...
分类:
其他好文 时间:
2017-01-17 13:48:11
阅读次数:
397
同事整理的,在此分享。logback,log4j2 等slf4j的日志实现都可以以json格式输出日志, 这里采用的是logback。当然也可以以文本行的格式输出,然后在logstash里通过grok解析,但是直接以json格式输出,在logstash处理时效率会高一点。 Logback 输出 Js ...
分类:
Web程序 时间:
2017-01-13 09:11:03
阅读次数:
1461
1.Logstash收集tomcat日志时报错warn: log4j:WARN No appenders could be found for logger (org.apache.http.client.protocol.RequestAuthCache).log4j:WARN Please in ...
分类:
其他好文 时间:
2017-01-12 08:38:53
阅读次数:
206
现在使用的比较常用的日志分析系统有Splunk和Elk,Splunk功能齐全,处理能力强,但是是商用项目,而且收费高。Elk则是Splunk项目的一个开源实现,Elk是ElasticSearch(Es)、Logstash、Kibana上个项目结合。Es就是基于Lucene的存储,索引的搜索引擎;lo ...
分类:
其他好文 时间:
2017-01-10 17:12:24
阅读次数:
6426
原文链接:http://www.tuicool.com/articles/mYjYRb6 beats是一个代理,将不同类型的数据发送到elasticsearch。beats可以直接将数据发送到elasticsearch,也可以通过logstash将数据发送elasticsearch。 beats有三 ...
分类:
其他好文 时间:
2017-01-09 16:32:02
阅读次数:
211
原文链接:https://yq.aliyun.com/articles/57420 摘要: Elk是Elastic search, Logstash和Kibana三者的简称。 Elastic search顾名思义是致力于搜索,它是一个弹性搜索的技术平台,与其相似的有Solr,二者的对比可参考下面这篇 ...
分类:
其他好文 时间:
2017-01-09 13:23:55
阅读次数:
260
原文链接:https://www.digitalocean.com/community/tutorials/how-to-use-logstash-and-kibana-to-centralize-logs-on-centos-6 Introduction In this tutorial, we ...
分类:
其他好文 时间:
2017-01-09 13:11:16
阅读次数:
216