一、简介1.ELK介绍ELKStack是Elasticsearch、Logstash、Kibana三个开源软件的组合。在实时数据检索和分析场合,三者通常是配合共用,而且又都先后归于Elastic.co公司名下,故有此简称。ELKStack在最近两年迅速崛起,成为机器数据分析,或者说实时日志处理领域,开源界的第一选..
分类:
其他好文 时间:
2016-09-21 23:45:29
阅读次数:
549
在经过了近半个月的ELK环境的搭建配置,我做了我个人的工作总结,和大家分享一下。一、命令总结1.1、Es服务端口查看#netstat-nlpt|grep-E"9200|9300"1.2、Es插件安装和移除#./bin/plugininstallfile:///home/apps/license-2.3.3.zip#./bin/plugininstallfile:///home/apps/marv..
分类:
其他好文 时间:
2016-09-21 23:20:54
阅读次数:
368
1、简介对于日志来说,最常见的需求就是收集、查询、显示,正对应logstash、elasticsearch、kibana的功能。ELK日志系统在系统中,主要可解决的问题:基于日志的数据挖掘问题排查,上线检查根据关键字查询日志详情异常数据自动触发消息通知服务器监控,应用监控,Bug管理统计分..
分类:
其他好文 时间:
2016-09-21 00:14:48
阅读次数:
277
实际中最好用的日志框架是logback,我们现在会直接使用logback通过tcp协议向logstash-shipper输入日志数据。在上一节的基础上修改!!! 一、代码 1、pom.xml 2、application.properties 3、LogstashProperties.java 4、L ...
分类:
其他好文 时间:
2016-09-21 00:03:53
阅读次数:
274
1、安装JDKrpm-ivhjdk-8u101-linux-x64.rpm
Preparing...###########################################[100%]
1:jdk1.8.0_101###########################################[100%]
UnpackingJARfiles...
tools.jar...
plugin.jar...
javaws.jar...
deploy.jar...
rt.jar.....
分类:
其他好文 时间:
2016-09-18 21:21:59
阅读次数:
188
初探ELK-filebeat使用小结2016/9/18
一、安装
1、下载
有2种方式下载,推荐缓存rpm包到本地yum源
1)直接使用rpm
[root@vm49~]#curl-L-Ohttps://download.elastic.co/beats/filebeat/filebeat-1.3.1-x86_64.rpm
2)使用yum源
[root@vm49~]#rpm--importhttps://packages.elasti..
分类:
其他好文 时间:
2016-09-18 21:20:59
阅读次数:
4950
通常,日志被分散的储存不同的设备上。如果你管理数十上百台服务器,你还在使用依次登录每台机器的传统方法查阅日志。这样是不是感觉很繁琐和效率低下。当务之急我们使用集中化的日志管理,例如:开源的syslog,将所有服务器上的日志收集汇总。 集中化管理日志后,日志的统计和检索又成为一件比较麻烦的事情,一般我 ...
分类:
其他好文 时间:
2016-09-17 09:24:03
阅读次数:
162
logstash服务启动脚本 最近在弄ELK,发现logstash没有sysv类型的服务启动脚本,于是按照网上一个老外提供的模板自己进行修改 如有不对的地方,欢迎大家拍砖o(∩_∩)o 本文版权归作者所有,未经作者同意不得转载。 ...
分类:
其他好文 时间:
2016-09-14 12:17:16
阅读次数:
161
一、目的 将nginx 日志通过普通用户利用rsync公钥认证的方式实时同步到本地服务器上,之后使用elk程序进行处理。 二、遇到问题及解决方法思路 问题1.文件权限:nginx 的日志默认权限如下: 我新建的是普通用户,标准的用户组,用rsync同步时,报个错误,说是没有该文件的权限 问题1解决方 ...
分类:
其他好文 时间:
2016-09-14 00:01:08
阅读次数:
283
日志管理:1、LogAnalyzer+LAMP&LNMP简单日志日志管理系统2、ELK日志管理系统3、。。。。。。比较:LogAnalyzer简单特点:安装配置简单,功能一般,但是中小公司足够用。配合监控服务器和一些shell脚本足够满足中小企业系统架构。难易程度:简单,初中级运维都可适用,满足..
分类:
其他好文 时间:
2016-09-12 22:45:23
阅读次数:
201