ELK日志分析平台学习记录首先ELK主要指elasticsearch、logstash和kibana，三个开源软件组合而成的一套日志平台解决方案。可以将平时收集到的日志，通过前台展示出来，并且可以加以分析，理论上可以解放劳动力（再也不用干上生产取日志这种活了——很搓）。最近在研究ELKstack日..
分类：
其他好文 时间：
2016-01-07 01:32:20
阅读次数：
4249
redis（logstash）.conf内容#服务端配置,logstash抓取redis数据，配置名自取例一#从redis读数据input{redis{host=>"127.0.0.1"port=>6379type=>"redis-input"data_type=>"list"key=>"logstash:redis"}}output{#输出到elastdout{}elasticsearch{cluster=>"ela..
分类：
其他好文 时间：
2016-01-06 18:23:54
阅读次数：
391
最近在接手elasticsearch 方面的工作，其中向已有的mapping添加新的字段的时候，一开始在网上找 资料，发现 网上 的资料都是关于更新mapping中已有字段类型的，所以写 一篇关于向 已有mapping添加新 字段的文章，仅供elasticsearch的新手学习。curl -XPUT...
分类：
移动开发 时间：
2016-01-05 20:45:17
阅读次数：
1259
通过代码创建了索引名称为demoindex，索引类型为school，以下是索引类型的数据映射结构：{ "state": "open", "settings": { "index.number_of_replicas": "1", "index.number_o...
分类：
其他好文 时间：
2015-12-25 22:24:55
阅读次数：
1876
测试环境：Ubuntu x86_643.13.0-35-generic安装jre： $ sudo apt-get install software-properties-common $ sudo add-apt-repository ppa:webupd8team/java $ sudo apt-...
分类：
系统相关 时间：
2015-12-25 13:22:57
阅读次数：
173
用Grafana为Elasticsearch做日志分析.Grafana是一个开源的、功能强大的指标仪表板和图形编辑器工具，它面向Graphite、Elasticsearch、OpenTSDB、Prometheus和InfluxDB等数据源。目前Grafana的最新版本为2.6版。...
分类：
其他好文 时间：
2015-12-21 22:04:51
阅读次数：
419
数据节点确定了master以后，会开启MasterPinger线程来与其保持心跳通信的逻辑如果通信过程中链接断开，会通过MasterNodeFailureListener监听器进行回调处理处理过程中会去调用ZenDiscovery类的handleMasterGone方法，以便选举出新的master进行通信master的选举逻辑主要是通过ZenDiscovery类findMaster方法来封装的，大...
分类：
其他好文 时间：
2015-12-21 10:54:50
阅读次数：
400
写此文章和就是为了记录logstash+elasticsearch+kibana+redis搭建过程。所有程序都是运行在windows 平台下。1. 下载 1.1 logstash, elasticsearch, kinana 从官方站点下载:https://www.elastic.co/ 1......
分类：
其他好文 时间：
2015-12-18 18:53:01
阅读次数：
185
1、服务器信息主机名IP地址内存大小
qc-hermes-es-1192.168.0.1032G
qc-hermes-es-2192.168.0.1132G
qc-hermes-es-3192.168.0.1232G2、基础安装1）JDK安装#cd/opt
#wgethttp://xxxx.xxx.xxx.xxx/jdk-8u45-linux-x64.gz
#tarxvzfjdk-8u45-linux-x64.gz
#ln-sjdk1.8.0_45jdk#vim/..
分类：
其他好文 时间：
2015-12-14 23:25:12
阅读次数：
673
在前面两篇文章中记录了使用logstash来收集mysql的慢查询日志，然后通过kibana以web的方式展示出来，但在生产环境中，需求会更复杂一些，而且通过logstash写正则，实在是个费时费劲的事。例如在生产环境中会有要求分析某个时间段mysql或者mongodb的慢查询日志情况；还有I/O吞吐..
分类：
其他好文 时间：
2015-12-14 19:16:44
阅读次数：
297
