到logstash-2.0.0\bin下新建文件 logstash.conf input { tcp { mode => "server" host => "0.0.0.0" port => 4560 codec => json_lines } } output { elasticsearch { ...
分类：
编程语言 时间：
2019-10-15 20:52:48
阅读次数：
115
【这个在去年8月就起稿了，一直没有发布....】 一、前言 说到前端监控大家应该都不会陌生，这是现代前端工程的标配之一。引入前端监控系统，可以使用例如fundebug，Sentry等第三方监控神器，当然你完全可以自己定制一套符合实际情况的监控模型。一个监控系统大致可以分为四个阶段：日志采集、日志存储 ...
分类：
其他好文 时间：
2019-10-15 14:57:12
阅读次数：
132
第二期日志易使用系列中《日志易产品使用系列二：使用日志易SaaS版本完成一次JSON日志分析》，通过“本地上传”的方式，我们已经能够基于日志易自动解析的JSON日志创建分析图表。第三期日志易使用系列中《日志易使用系列三：仪表盘的创建与使用》，通过仪表盘，我们可以将这些图形保存下来，并用于分析展示。然而，实时数据的分析、展示依赖于实时的日志采集，日志易可通过Agent、Syslog等方式实现日志的实
分类：
其他好文 时间：
2019-09-16 14:06:04
阅读次数：
112
非kerberos环境下，flume采集日志到kafka
分类：
Web程序 时间：
2019-07-16 22:42:50
阅读次数：
177
Nginx访问日志 这里补充下Nginx访问日志使用的说明。一般在nginx.conf主配置文件里需要定义一种格式： 上面的格式我是基于默认的加了一个 。 然后子配置使用： 即可。 Filebeat采集日志数据到ElasticSearch 配置： 配置详情： 配置说明： filebeat.prosp ...
分类：
其他好文 时间：
2018-12-22 14:55:21
阅读次数：
178
判断题： 1.如果?NameNode?意外终止，SecondaryNameNode?会接替它使集群继续工作。（错误） 分析： SecondaryNameNode是帮助恢复，而不是替代 SecondaryNameNode所做的不过是在文件系统中设置一个检查点来帮助NameNode更好的工作。它不是要取 ...
分类：
其他好文 时间：
2018-09-14 17:18:11
阅读次数：
148
使用beats采集日志 之前也介绍过beats是ELK体系中新增的一个工具，它属于一个轻量的日志采集器，以上我们使用的日志采集工具是logstash，但是logstash占用的资源比较大，没有beats轻量，所以官方也推荐使用beats来作为日志采集工具。而且beats可扩展，支持自定义构建。 官方 ...
分类：
其他好文 时间：
2018-08-03 14:47:43
阅读次数：
456
好处：项目日志写到logstash，然后发送到ElasticSearch，可以方便查看搜索日志，还可以做报表分析。 logstash是一个数据采集工具，有多种渠道，比如文件，tcp，udp等，如果是采集日志文件，那么需要在存放文件所在的服务器上，启动一个logstash服务，不方便快速部署；而采用t ...
分类：
编程语言 时间：
2018-07-05 21:30:40
阅读次数：
1963
Logstash基本介绍和使用场景 自我认为：logstash就是日志的采集收集，日志的搬运工，实时去采集日志。读取不同的数据源，并进行过滤，开发者自定义规范输出到目的地。日志的来源很多，如系统日志，应用日志等等（同类软件：filebeat） 官方文档：https://www.elastic.co/ ...
分类：
其他好文 时间：
2018-05-22 17:22:26
阅读次数：
213
