利用elasticsearch收集到的数据，展示在kibana上在Logstash配置完成，将数据输出到elasticsearch中启动Kibana，链接elasticsearch在setting页面回检测到Time-fieldsnameCreate按钮就可以创建，这里要注意的是logstash-*也可以定义你要匹配的索引。这里的logstash-*是在logstash..
分类：
其他好文 时间：
2017-05-26 21:59:15
阅读次数：
9311
在"helloWorld"示例中,我们已经见到并介绍了Logstash的运行流程和配置的基础语法。请记住一个原则：Logstash配置一定要有一个input和一个output。在演示过程中，如果没有写明input，默认就会使用"helloworld"里我们已经演示过的input/stdin，同理，没有写明的output就是output/..
分类：
其他好文 时间：
2017-05-25 14:49:42
阅读次数：
156
在"helloWorld"示例中,我们已经见到并介绍了Logstash的运行流程和配置的基础语法。请记住一个原则：Logstash配置一定要有一个input和一个output。在演示过程中，如果没有写明input，默认就会使用"helloworld"里我们已经演示过的input/stdin，同理，没有写明的output就是output/..
分类：
其他好文 时间：
2017-05-24 22:43:40
阅读次数：
275
前面介绍了ES，Kibana5.3.1的安装配置，以及IK分词的安装和同义词设置，这里主要记录Logstash导入mysql数据到Elasticsearch5.3.1并设置IK分词和同义词。由于logstash配置好JDBC，ES连接之后运行脚本一站式创建index，mapping，导入数据。但是如... ...
分类：
其他好文 时间：
2017-05-23 18:47:20
阅读次数：
2358
续之前安装好的ELK集群 各主机：es-1 ~ es-3 :192.168.1.21/22/23 logstash: 192.168.1.24 kibana: 192.168.1.25 测试机：client: 192.168.1.26 在测试机上安装并启动filebeat 1. 下载filebeat ...
分类：
其他好文 时间：
2017-05-21 23:24:19
阅读次数：
533
elasticstack基础组件beats详解fielbeatfilebeat:
spool_size:1024#最大可以攒够1024条数据一起发送出去
idle_timeout:"5s"#否则每5秒钟也得发送一次
registry_file:".filebeat"#文件读取位置记录文件，会放在当前工作目录下。所以如果你换一个工作目录执行filebeat
会导致重复..
分类：
其他好文 时间：
2017-05-17 15:23:42
阅读次数：
775
ELK架构：elasticsearch+kibana+filebeat版本信息：elasticsearch5.2.1kibana5.2.1filebeat6.0.0(预览版)今天在进行ELK测试的时候，在kibana上面discover无论那个index，发现均会报错：[request]Datatoolarge,datafor[<agg[2]>]wouldbelargerthanlimitof并且在elasticsea..
分类：
Web程序 时间：
2017-05-16 23:19:02
阅读次数：
1228
一、filebeat概述 Filebeat是一个日志文件托运工具，在你的服务器上安装客户端后，filebeat会监控日志目录或者指定的日志文件，追踪读取这些文件（追踪文件的变化，不停的读），并且转发这些信息到elasticsearch或者logstarsh中存放 工作流程 当你开启filebeat程 ...
分类：
其他好文 时间：
2017-05-08 18:45:41
阅读次数：
383
【一】资源准备#3台4C*8G,安装Zookeeper、Kafka、Logstash——Broker(input:filebeat;output:Kafka)10.101.2.2310.101.2.2410.101.2.25#2台4C*8G,安装Logstash——Indexer(input:Kafaka;output:Elasticsearch)10.101.2.2610.101.2.27#3台8C*16G,安装Elasticsearch10.101.2.2810..
分类：
其他好文 时间：
2017-05-04 23:11:46
阅读次数：
2545
介绍通过利用filebeat来收集mysql的慢查询日志，logstash解析后推送到elasticsearch，并创建自定义的索引，最终通过kibana进行web展示。环境介绍：操作系统版本：CentOSLinuxrelease7.3.1611(Core)64bitMysql版本：5.6.28Logstash版本:logstash5.3.0Elasticsearch版本：elastic..
分类：
数据库 时间：
2017-04-21 15:01:58
阅读次数：
3759
