Node里面的Buffer其实就是用于网络请求、文件读取等等操作，而且是分配在堆外，不会占用堆内的内存，这也是因为本来V8的内存就很小，如果读取大文件，那就......之前有看过Logstash的Buffer源码，感觉比这个高级多了....而Ruby中的Buffer则有点缓存的性质，支持大小的限制，...
分类：
Web程序 时间：
2016-01-07 22:50:03
阅读次数：
207
ELK日志分析平台学习记录首先ELK主要指elasticsearch、logstash和kibana，三个开源软件组合而成的一套日志平台解决方案。可以将平时收集到的日志，通过前台展示出来，并且可以加以分析，理论上可以解放劳动力（再也不用干上生产取日志这种活了——很搓）。最近在研究ELKstack日..
分类：
其他好文 时间：
2016-01-07 01:32:20
阅读次数：
4249
redis（logstash）.conf内容#服务端配置,logstash抓取redis数据，配置名自取例一#从redis读数据input{redis{host=>"127.0.0.1"port=>6379type=>"redis-input"data_type=>"list"key=>"logstash:redis"}}output{#输出到elastdout{}elasticsearch{cluster=>"ela..
分类：
其他好文 时间：
2016-01-06 18:23:54
阅读次数：
391
1.syslog介绍：日志服务在CentOS5上默认为syslog，而6上全部升级为rsyslog。Rsyslog是syslog的增强版，提供了很多高级的特性。syslog由两个进程构成，klogd和syslogd，klogd记录Kernel产生的日志信息，而syslogd是普通的日志信息。除了一些高级特性，Rsyslog和syslog的整体框架..
分类：
其他好文 时间：
2016-01-04 00:13:11
阅读次数：
386
kibana做图表无法选取需要选的字段，即通过term的方式过滤选择某一个field时发现列表里无此选项。再去discover里看，发现此字段前面带有问号，点击后提示这个字段未做索引，不能用于visualize和discover的搜索。思考：从源头查起，日志是logstash收集上来的，猜想可能原因是log..
分类：
其他好文 时间：
2015-12-31 21:06:55
阅读次数：
200
最近使用logstash的作为日志处理工具是发现一个问题,logstash给提供了一个默认的时间字段@timestamp,这个时间无论我怎么该他都是０时区的时间，没有办法改成+08:00时区的时间，后来查了很多资料发现原来是代码直接获取的UTC默认的时间，所以无论怎么更改系统时间它都不会改变。..
分类：
其他好文 时间：
2015-12-30 13:51:00
阅读次数：
4773
RHEL6.x搭建rsyslog日志服务器和loganalyzer日志分析工具===============================================rsyslog的介绍logrotate日志滚动的介绍rsyslog的存储途径基于web的loganalyzer日志分析工具的搭建======================================================一、rsyslog..
分类：
数据库 时间：
2015-12-25 19:32:01
阅读次数：
447
写此文章和就是为了记录logstash+elasticsearch+kibana+redis搭建过程。所有程序都是运行在windows 平台下。1. 下载 1.1 logstash, elasticsearch, kinana 从官方站点下载:https://www.elastic.co/ 1......
分类：
其他好文 时间：
2015-12-18 18:53:01
阅读次数：
185
在前面两篇文章中记录了使用logstash来收集mysql的慢查询日志，然后通过kibana以web的方式展示出来，但在生产环境中，需求会更复杂一些，而且通过logstash写正则，实在是个费时费劲的事。例如在生产环境中会有要求分析某个时间段mysql或者mongodb的慢查询日志情况；还有I/O吞吐..
分类：
其他好文 时间：
2015-12-14 19:16:44
阅读次数：
297
[root@Cagios logstash-2.1.0]# cat /usr/local/logstash-2.1.0/logstash_agent.conf input { file { type => "apache_access" path => ["/var/log/httpd...
分类：
Web程序 时间：
2015-12-08 12:56:42
阅读次数：
138
