ELK是指Elasticsearch+Logstash+Kibaba三个组件的组合。Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，多数据源，自动搜索负载等。Logstash是一个完全开源的工具，他可以对你的日志进行收集、过..
分类：
其他好文 时间：
2017-07-05 20:04:12
阅读次数：
452
当程序在线上运行时，如果遇到BUG，想不在前端输出错误信息，同时能及时邮件通知开发者，register_shutdown_function函数就可以派上用场了。 注册一个会在脚本执行完成或者 exit() 后被调用的函数。 可以多次调用 register_shutdown_function() ，这 ...
分类：
Web程序 时间：
2017-07-03 16:32:41
阅读次数：
188
ELKstack简介： ELKstack是Elasticsearch、Logstash、Kibana三个开源软件的组合而成，形成一款强大的实时日志收集展示系统。 各组件作用如下： Logstash：日志收集工具，可以从本地磁盘，网络服务（自己监听端口，接受用户日志），消息队列中收集各种各样的日志，然 ...
分类：
其他好文 时间：
2017-06-16 18:23:53
阅读次数：
358
用ElasticSearch,LogStash,Kibana搭建实时日志收集系统 介绍 这套系统，logstash负责收集处理日志文件内容存储到elasticsearch搜索引擎数据库中。kibana负责查询elasticsearch并在web中展示。 logstash收集进程收获日志文件内容后，先 ...
分类：
其他好文 时间：
2017-06-14 13:00:03
阅读次数：
377
使用ELK对返回502的报警进行日志的收集汇总 Elk:日志收集分析平台 网址：http://www.xxx.com eg：Server用户访问网站返回502 首先在zabbix上找到Server的IP 然后登录到elk上使用如下搜索条件： pool_select:X.X.X.X AND statu ...
分类：
其他好文 时间：
2017-06-10 18:29:03
阅读次数：
259
1. flume简介 flume 作为 cloudera 开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume 初始的发行版本目前被统称为 Flume OG（original generation），属于 cloudera。但随着 FLume 功能的扩展，Flume OG 代码工程臃肿、核 ...
分类：
Web程序 时间：
2017-06-07 12:36:55
阅读次数：
211
漫谈iOS Crash收集框架 为了能够第一时间发现程序问题，应用程序需要实现自己的崩溃日志收集服务，成熟的开源项目很多，如 KSCrash，plcrashreporter，CrashKit 等。追求方便省心，对于保密性要求不高的程序来说，也可以选择各种一条龙Crash统计产品，如 Crashlyt ...
分类：
移动开发 时间：
2017-06-04 19:59:49
阅读次数：
236
ELKstack-企业级日志收集系统 1. ELKstack简介 ELKstack是Elasticsearch、Logstash、Kibana三个开源软件的组合而成，形成一款强大的实时日志收集展示系统。 各组件作用如下： Logstash：日志收集工具，可以从本地磁盘，网络服务(自己监听端口，接受用 ...
分类：
其他好文 时间：
2017-06-03 17:24:11
阅读次数：
308
常见的开源数据收集系统有： 非结构数据（日志）收集 Flume 结构化数据收集（传统数据库与 Hadoop 同步） Sqoop：全量导入 Canal（alibaba）：增量导入 Databus（linkedin）：增量导入 Flume是什么： 由Cloudera公司开源 分布式、可靠、高可用的海量日 ...
分类：
Web程序 时间：
2017-05-24 19:15:25
阅读次数：
407
fluem中出现，transactionCapacity查询一下，得出一下这些： 最近在做flume的实时日志收集，用flume默认的配置后，发现不是完全实时的，于是看了一下，原来是memeryChannel的transactionCapacity在作怪，因为他默认是100，也就是说收集端的sink ...
分类：
Web程序 时间：
2017-05-23 21:36:23
阅读次数：
513
