在项目初期的时候,大家都是赶着上线,一般来说对日志没有过多的考虑,当然日志量也不大,所以用log4net就够了,随着应用的越来越多,日志散 落在各个服务器的logs文件夹下,确实有点不大方便,这个时候就想到了,在log4net中配置 mysql的数据源,不过这里面有一个坑,熟悉log4net的同学知 ...
分类:
其他好文 时间:
2017-11-29 10:21:00
阅读次数:
208
本文记录了三个配置文件:第一个:all.conf通过一个配置文件,配置输入输出,实例;第二个:shipper.conf配置logstash收集日志内容到redis里;第三个:indexer.conf配置logstash从redis里读取日志内容输出到Elasticsearch里。第二个跟第三个配置解耦收集日志ELK解耦logstash---..
分类:
其他好文 时间:
2017-07-12 15:20:58
阅读次数:
242
环境的困境(原因)1、开发人员不能登录线上服务器查看相信日志;2、各个系统都有日志,日志数据分散难以查找;3、日志数据量大,查询速度慢,或者数据不够及时。(状态码400的top10)收集->存储->统计->报警、、、ElasticSearch+Logstash+Kibana=ELKStack1、分布式全..
分类:
其他好文 时间:
2017-07-12 10:02:30
阅读次数:
474
ELK日志平台是一个完整的日志分析系统,有三个开源工具构建组成,分别是:Elasticsearch、Logstash和Kibana。Elasticsearch用于数据分析和深度搜索;Logstash作用是从其他服务器上传输和转发日志,对其集中管理,进行分析;Kibana则是提供了强大的UI展示,将数据可视化。安装EL..
分类:
其他好文 时间:
2017-06-16 23:10:15
阅读次数:
384
最近在搞ELK日志平台,部署filebeat收集日志时(输出到redis),出现了经典的【连接被目标机器积极拒绝】异常, 1)环境配置: 开发机,开发服务机(开发机上的virtualbox虚拟机,启动了ELK服务)、测试机、测试服务机(ELK) 2)本机(开发机)使用可输出日志到开发服务机 + 测试 ...
分类:
其他好文 时间:
2017-04-07 18:13:08
阅读次数:
1289
什么是ELK? ELK指的是ElasticSearch,Logstash,Kibana这三个工具的首字母缩写,中文指南很详细,按其步骤来,入门基本没啥问题。 解决什么问题? 公司产品EDI平台的主要任务就是将各个数据源的文件信息处理后再发送第三方,没有实时监控,文件发送不成功时,运维相当被动。 EL ...
分类:
其他好文 时间:
2017-04-03 01:16:22
阅读次数:
258
参考:http://www.tuicool.com/articles/R77fieA 我在做ELK日志平台开始之初选择为ELK+Redis直接构建,在采集nginx日志时一切正常,当我采集我司业务报文日志类后,logstash会报大量的redis connect timeout。换成redis cl ...
分类:
其他好文 时间:
2017-03-30 16:16:53
阅读次数:
460
一、ELKStack简介Elstaicsearch:存储和搜索
logstash:收集
kibana:展示.专门为ES设计的展示平台二、ELK之kibana安装环境准备IP 主机名 操作系统
192.168.56.11 linux-node1 centos7
192.168.56.12 linux-node2 centos71、安装JDK[root@linux-node1~]#yuminstall-yjav..
分类:
其他好文 时间:
2016-09-12 22:28:30
阅读次数:
175
一、ELKStack简介Elstaicsearch:存储和搜索
logstash:收集
kibana:展示二、ELK----之Logstash安装环境准备IP 主机名 操作系统
192.168.56.11 linux-node1 centos7
192.168.56.12 linux-node2 centos7在两台服务器上都安装logstash1、JDK安装安装JDK[root@linux-node1..
分类:
其他好文 时间:
2016-08-31 12:19:04
阅读次数:
271