本博客安装的ELK版本为目前最新版本6.3.0,由于elasticsearch是基于java开发的,所以对JDK的版本有要求,在5.0以后的版本中,要求JDK版本不低于1.8的才可正常实用。 同时,elasticsearch,logstash,kibana三个版本最好一致,否则会产生因版本冲突发生的 ...
分类:
系统相关 时间:
2018-07-07 12:41:59
阅读次数:
238
一、ELKStack简介 1、ELK介绍 中文指南:https://www.gitbook.com/book/chenryn/elk-stack-guide-cn/details ELK Stack包含:ElasticSearch、Logstash、Kibana ElasticSearch是一个搜索 ...
分类:
其他好文 时间:
2018-07-06 13:14:03
阅读次数:
405
1ELK是一个实时分布式的日志分析平台ELK是一整套的解决方案(E)lasticsearch--数据库(L)ogstash--收集日志、标准化的程序(K)ibana--图形的展示工具2数据批量导入-X导入使用的方法POST--data-binary导入数据的格式@urfile导入数据的文件名_bulk导入关键字curl-X"POST""http://192.168.1
分类:
其他好文 时间:
2018-07-06 10:08:36
阅读次数:
234
好处:项目日志写到logstash,然后发送到ElasticSearch,可以方便查看搜索日志,还可以做报表分析。 logstash是一个数据采集工具,有多种渠道,比如文件,tcp,udp等,如果是采集日志文件,那么需要在存放文件所在的服务器上,启动一个logstash服务,不方便快速部署;而采用t ...
分类:
编程语言 时间:
2018-07-05 21:30:40
阅读次数:
1963
filebeat配置列表 filebeat搜集的日志输出到redis elasticsearch配置文件 elasticsearch.yml logstash配置文件 filebaet-java-to-es.conf ...
分类:
其他好文 时间:
2018-07-05 19:38:34
阅读次数:
272
ELK是什么??Sina、饿了么、携程、华为、美团、freewheel、畅捷通、新浪微博、大讲台、魅族、IBM......这些公司都在使用ELK!ELK!ELK!?ELK竟然重复了三遍,是个什么鬼?ELK其实并不是一款软件,而是一整套解决方案,是三个软件产品的首字母缩写–Elasticsearch:负责日志检索和储存–Logstash:负责日志的收集和分析、处理–Kibana:负责日志的可视化–这
分类:
其他好文 时间:
2018-07-04 15:12:37
阅读次数:
226
原文地址:Logstash 基础入门博客地址:http://www.extlight.com 一、前言 Logstash 是一个开源的数据收集引擎,它具有备实时数据传输能力。它可以统一过滤来自不同源的数据,并按照开发者的制定的规范输出到目的地。 顾名思义,Logstash 收集数据对象就是日志文件。 ...
分类:
其他好文 时间:
2018-06-29 17:20:59
阅读次数:
188
ELK从5.6.3升级到6.3.0总结 由于6.3.0默认有es的监控功能,并且我们现在es总是有各种问题,原有的es开源插件head和HQ的监控都不够详细,所以决定升级es集群。我们目前es有5个node。我们的数据流向是filebeat logstash kafka logstash elast ...
分类:
其他好文 时间:
2018-06-29 14:09:54
阅读次数:
407
先简单说一下部署思路及原理(不一定正确,只是个人理解而已) 1.修改系统参数,以便安装软件 2.安装配置elasticsearch,这个相当于总监测中心,用来收集logstash监测的各种服务应用日志,然后将监测的各个logstash的日志发送给kibana 3.安装配置logstash,这个相当于 ...
分类:
其他好文 时间:
2018-06-28 15:23:12
阅读次数:
174
elk+redis 搭建nginx日志分析平台 logstash,elasticsearch,kibana 怎么进行nginx的日志分析呢?首先,架构方面,nginx是有日志文件的,它的每个请求的状态等都有日志文件进行记录。其次,需要有个队列,redis的list结构正好可以作为队列使用。然后分析使 ...
分类:
其他好文 时间:
2018-06-26 22:31:55
阅读次数:
196