logstash解析嵌套json格式数据 1、源文件 1.原日志文件为 在这里我们需要先把json前面一段的正则写出来，由于这些数据在实际生产没什么实际意义，所以没重点分字段 DATETIME %{YEAR}-%{MONTHNUM}-%{MONTHDAY}[T ]%{HOUR}:?%{MINUTE} ...
分类：
Web程序 时间：
2019-10-28 10:39:41
阅读次数：
260
通过部署elasticsearch（三节点）+filebeat+kibana快速入门EFK，并搭建起可用的demo环境测试效果
分类：
其他好文 时间：
2019-10-27 22:57:28
阅读次数：
131
通过部署elasticsearch（三节点）+filebeat+kibana快速入门EFK，并搭建起可用的demo环境测试效果 ...
分类：
其他好文 时间：
2019-10-27 20:49:43
阅读次数：
106
最近在做ES搜索调优，看了一些lucene搜索的文档和代码，本文用于总结调优过程中学到的知识和自己的思考。 在抓到ES慢查询之后，会通过profile或者kibana的Search Profiler console查看具体慢在了哪里。一般在执行profile search之前，需要稍微改变query ...
分类：
其他好文 时间：
2019-10-27 11:11:54
阅读次数：
209
Beats，Logstash负责数据收集与处理。相当于ETL（Extract Transform Load）。Elasticsearch负责数据存储、查询、分析。Kibana负责数据探索与可视化分析。 1、Elasticsearch 6.x版本的安装，我这里使用Elasticsearch 6.7.0 ...
分类：
其他好文 时间：
2019-10-26 15:11:18
阅读次数：
86
Elasticsearch 本文简单介绍了ES、Kibana和Go语言操作ES。 Elasticsearch 介绍 Elasticsearch（ES）是一个基于Lucene构建的开源、分布式、RESTful接口的全文搜索引擎。Elasticsearch还是一个分布式文档数据库，其中每个字段均可被索引 ...
分类：
其他好文 时间：
2019-10-26 12:04:58
阅读次数：
89
认识Beats Beats是用于单用途数据托运人的平台。它们以轻量级代理的形式安装，并将来自成百上千台机器的数据发送到Logstash或Elasticsearch。 （画外音：通俗地理解，就是采集数据，并上报到Logstash或Elasticsearch） Beats对于收集数据非常有用。它们位于你 ...
分类：
其他好文 时间：
2019-10-26 10:31:41
阅读次数：
98
官方定义：Logstash 是开源的服务器端数据处理管道，能够同时从多个来源采集数据，转换数据，然后将数据发送到您最喜欢的“存储库”中。 LogStash是重量级的，支持多数据获取机制，通过TCP/UDP协议、文件、syslog、windows Eventlogs及STDIN等；获取到数据后，它支持 ...
分类：
其他好文 时间：
2019-10-24 15:07:32
阅读次数：
102
1，打开kibana,创建一个索引： 2，插入一条数据： 3，查询测试： ...
分类：
其他好文 时间：
2019-10-22 14:53:56
阅读次数：
62
