一个logstash很容易通过http打断成两个logstash实现跨服务器或者跨平台间数据同步，比如原来的流程是 logstash: nginx log -> kafka 打断成两个是 logstash1: nginx log -> http out logstash2: http in ->ka ...
分类：
Web程序 时间：
2019-03-20 01:15:24
阅读次数：
245
https://www.elastic.co/downloads/kibana 1.Download and unzip Kibana 2. Open config/kibana.yml in an editor Set elasticsearch.hosts to point at your El ...
分类：
其他好文 时间：
2019-03-19 16:54:39
阅读次数：
324
背景 春节过后回京，本想好好休息两天结果家里迎来了不速之客——老鼠。最后通过一系列的操作终于成功捕获一家 8 口，这个过程笔者就不做多描述了。由于此次捕鼠事件留下阴影决定搬离。和媳妇开始寻找合适的房源，这还只是一个开始；之后看好房子（房子还在配置中）跟管家约定好释放当日签约；和媳妇两台手机两台电脑抢 ...
分类：
其他好文 时间：
2019-03-12 18:43:39
阅读次数：
165
ELK = ElasticSearch + Logstash + Kibana Elasticsearch：后台分布式存储以及全文检索 Logstash : 日志加工、“搬运工” Kibana : 数据可视化展示 ELK架构为数据分布式存储、可视化查询和日志解析创建了一个功能强大的管理链。 三者相互 ...
分类：
其他好文 时间：
2019-03-08 17:16:03
阅读次数：
176
1. ES集群安装 准备1台虚拟机 部署elasticsearch第一个节点 访问9200端口查看是否安装成功 1ELK是日志分析平台，不是一款软件,而是一整套解决方案,是三个软件产品的首字母缩写，ELK分别代表： Elasticsearch:负责日志检索和储存 Logstash:负责日志的收集和分 ...
分类：
其他好文 时间：
2019-03-08 16:40:16
阅读次数：
237
官网地址:https://www.elastic.co/cn/ ELK是Elasticsearch、Logstash、Kibana的简称，这三者是核心套件，但并非全部。 Elasticsearch是实时全文搜索和分析引擎，提供搜集、分析、存储数据三大功能；是一套开放REST和JAVA API等结构提 ...
分类：
其他好文 时间：
2019-03-07 18:03:15
阅读次数：
180
[TOC] 本案例参考自阿里云的 "视频直播解决方案之视频核心指标监控" 和 "视频直播解决方案之直播数字化运营" 。 基于Kafka + Flink + ELK + Redis实现视频直播数据的实时处理和可视化。 选型仅仅出于练习考虑，Logstash一般会换成flume或者直接用kafka。 模 ...
分类：
其他好文 时间：
2019-03-06 13:38:35
阅读次数：
182
1、首先是要在nginx里面配置日志格式化输出 2、接下来开始在logstash创建处理nginx的配置文件 此处的例子借鉴ELKstack权威指南里面的例子，不过书中的例子有错，我这里修改好了，可以参考书籍39页和66页 3、最后允许一下看一下效果所示： 唯一不足的就是中间报了个错误，可以自行解决 ...
分类：
其他好文 时间：
2019-03-05 17:03:47
阅读次数：
171
翻阅上篇文章： "Windows 10 安装 ElasticSearch" 上次写的是下载Zip包安装的，在 "下载页面" 发现有 "MSI (BETA) " 的下载可选项。了解之后发现MSI安装也值得尝试。 MSI安装ElasticSearch 参考文章： "Install Elasticsear ...
一、集群规划 consul借助agent来运行，类似elk的logstash agent 或 zabbix监控系统的agent ， 每个需要被发现的服务上，通过consul agent client 来收集服务本身的信息，然后向consul agent server汇报, consul server ...
分类：
系统相关 时间：
2019-03-02 18:40:43
阅读次数：
264
