项目中我们总是用 `Kibana` 界面来搜索测试或生产环境下的日志，来看下有没有异常信息。`Kibana` 就是 我们常说的 `ELK` 中的 `K`。但这些日志检索原理是什么呢？这里就该我们的 Elasticsearch 搜索引擎登场了。
分类：
其他好文 时间：
2020-10-10 17:19:02
阅读次数：
25
项目中我们总是用 `Kibana` 界面来搜索测试或生产环境下的日志，来看下有没有异常信息。`Kibana` 就是 我们常说的 `ELK` 中的 `K`。但这些日志检索原理是什么呢？这里就该我们的 Elasticsearch 搜索引擎登场了。
分类：
其他好文 时间：
2020-10-10 17:18:31
阅读次数：
25
1. ELK架构简介 1.1 核心组成 ELK是一套开源免费且功能强大的日志分析管理系统，由Elasticsearch、Logstash、Kibana三部分组成，简称ELK。 ELK可以将系统日志、网站日志、应用系统日志等各种日志进行收集、过滤、清洗，然后进行集中存放并可用于检索、分析。 这三款软件 ...
分类：
其他好文 时间：
2020-09-18 01:22:40
阅读次数：
31
系统版本 centos 7.0 elk:6.7.2 jdk:1.8.0 1.elk结构 filebeat==>redis==>logstash==>es(群集)==>kibana 2.安装es群集 vim /etc/hosts 172.16.206.110 node-1 172.16.206.114 ...
分类：
其他好文 时间：
2020-09-18 00:56:30
阅读次数：
33
ELK是一种日志收集，分析的组合软件。ELK/EFK的组成部分，分别是：elasticsearch,logstash,kibanaelasticsearch(简称es数据库)：负责数据的存储，数据的分析，数据的搜索，是基于luncene做的二次开发。（es数据库是非关系型数据库）logstash：负责客户端日志收集工具，替代工具。（filebeat）kibana：负责数据的展示，查询。
分类：
其他好文 时间：
2020-09-17 22:03:38
阅读次数：
37
input { stdin{ } elasticsearch { hosts => ["http://127.0.0.1:9200"] user => "admin" index => "*" password => "admin" #设置为true，将会提取ES文档的元数据信息，例如index、t ...
分类：
其他好文 时间：
2020-09-17 21:46:29
阅读次数：
33
Sqoop 在hadoop和关系型数据库之间转换数据 Flume Flume是一个分布式的高可用的数据收集、聚集和移动的工具。通常用于从其他系统搜集数据，如web服务器产生的日志，通过Flume将日志写入到Hadoop的HDFS中 Canal 数据抽取是 ETL 流程的第一步。我们会将数据从 RDB ...
分类：
其他好文 时间：
2020-09-17 18:33:30
阅读次数：
37
注意：这种方式报警采用的是邮件方式，并不包含微信报警方式，因为采用的是国外的docker镜像，主要作用是在kibana中安装配置插件，图形化配置rule告警规则，其实就跟直接编辑告警规则类似 1.创建几个文件夹保存ElastAlert相关配置信息，用来挂载到容器中使用 mkdir -p /mnt/e ...
分类：
其他好文 时间：
2020-09-17 17:25:36
阅读次数：
38
什么是ELK？ 通俗来讲，ELK是由Elasticsearch、Logstash、Kibana 三个开源软件的组成的一个组合体，ELK是elastic公司研发的一套完整的日志收集、分析和展示的企业级解决方案，在这三个软件当中，每个软件用于完成不同的功能，ELK 又称为ELK stack，官方域名为e ...
分类：
其他好文 时间：
2020-09-17 15:51:53
阅读次数：
26
