一、概述 ELK 已经成为目前最流行的集中式日志解决方案,它主要是由Beats、Logstash、Elasticsearch、Kibana等组件组成,来共同完成实时日志的收集,存储,展示等一站式的解决方案。本文将会介绍ELK常见的架构以及相关问题解决。1. Filebeat:Filebeat是一款轻 ...
分类:
其他好文 时间:
2017-12-03 13:54:23
阅读次数:
275
一、ELK介绍1.1elasticsearch1.1.1elasticsearch介绍ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTfulweb接口。Elasticsearch是用Java开发的,并作为Apache许可条款下的开放源码发布,是第二流行的企业搜索引擎。设计用于..
分类:
其他好文 时间:
2017-11-13 18:30:16
阅读次数:
214
PS:此片文章是承接上篇ELK部署文档,再次便不详细说明了 【安装Redis】 [root@Redis ~]# wget http://download.redis.io/releases/redis-2.8.13.tar.gz [root@Redis ~]# tar zxvf redis-2.8. ...
分类:
其他好文 时间:
2017-10-27 01:49:51
阅读次数:
316
版本说明:Elasticsearch5.0Logstash5.0(暂时未用)Filebeat5.0Kibana5.0ELK是一套采集日志并进行清洗分析的系统,由于目前的分析的需求较弱,所以仅仅采用filebeat做日志采集,没有使用logstash一、环境准备&&软件安装:1、首先,需要安装Java环境下载安装包:jre-8u..
分类:
其他好文 时间:
2017-03-20 19:59:15
阅读次数:
234
master端:elasticsearch+logstash+redis+kibanaslave端:logstash+nginxorlogstash+rsyslog1.slave端收集nginx、syslog日志通过logstash写入到master上的redis中2.master上的logstash读取redis中的日志输出到elastic,kibana再匹配读取elastic上内容一、环境配置1.安装jdkwget..
分类:
其他好文 时间:
2016-09-07 16:10:44
阅读次数:
217
1、介绍elk是实时日志分析平台,主要是为开发和运维人员提供实时的日志分析,方便人员更好的了解系统状态和代码问题。2、elk中的e(elasticsearch):(2.1)先安装依赖包,官方文档说明使用java1.8yum-yinstalljava-1.8.0-openjdk安装elasticsearch:tarzvxfelasticsearch-1.7...
分类:
其他好文 时间:
2016-08-11 23:30:29
阅读次数:
814
ElasticSearch个基于Lucene的搜索服务器;可以使用多节点的备份;集群设置;(类似是个数据库型、有索引有什么的)、(luceneapache基金的全文检索引擎的架构)1、ElasticSearch安装使用;软件架构安装时第一步;检测JDK环境在8版以上;如果已经有了可以安装卸载掉yumremovejdk如..
分类:
其他好文 时间:
2016-06-18 01:35:13
阅读次数:
398
上海资邦集团战略发展部目录版本控制信息...1目录i1ELK简介...11.1ElasticSearch介绍...11.2LogStash介绍...11.3Kibana介绍...12开始部署ELK..12.1测试环境准备...12.2安装前的准备工作...12.2.1系统yum源设置...12.2.2系统时间设置...12.2.3内核参数设置...22.2.4最大打开文件..
分类:
其他好文 时间:
2016-06-09 01:01:51
阅读次数:
637
前言:Elk主要就是3个软件的组合,主要是elasticsearch搜索引擎,Logstash是一个日志收集日志,kibana实时分析进行展示。[关于日志搜集的软件,如:scribe,flume,heka,logstash,chukwa,fluentd,当然rsyslogrsyslog-ng都可以搜集。关于日志手机后存储软件,如:HDFS,Cassandramong..
分类:
系统相关 时间:
2016-05-27 14:58:51
阅读次数:
856
ELK部署完成后,出现了一些问题,需要调整及优化。1.elasticsearch调节堆内存大小:Elasticsearch默认设置的内存是1GB,对于业务较小,所以需要将机器一半内存分配给jvm查看系统内存:#free-m
totalusedfreesharedbufferscached
Mem:2402820449357901858151
-/+buffers/cache:1..
分类:
其他好文 时间:
2016-05-18 12:51:47
阅读次数:
1303