logstash,elasticsearch,kibana 怎么进行nginx的日志分析呢?首先,架构方面,nginx是有日志文件的,它的每个请求的状态等都有日志文件进行记录。其次,需要有个队列,redis的list结构正好可以作为队列使用。然后...
分类:
其他好文 时间:
2015-11-05 10:51:47
阅读次数:
291
前记:去年测试了ELK,今年测试了Storm,最终因为Storm需要过多开发介入而放弃,选择了ELK。感谢互联网上各路大神,目前总算是正常运行了。logstash+elasticsearch+kibana的搭建参考:http://wsgzao.github.io/post/elk/。由于搭建过程比较...
分类:
其他好文 时间:
2015-11-04 14:45:47
阅读次数:
1693
近些年随着DevOps概念越来越收到重视,除了传统的Splunk,Zabbix外在开源领域也有越来越多的软件可供使用.从数据收集,时序数据库,图形展示等主要方面有各类可扩展的软件用于搭建一个数据监控平台(详细列表),Logstash+elasticsearch+kibana算是被写的比较多的,本.....
分类:
其他好文 时间:
2015-10-31 17:13:41
阅读次数:
671
vim /usr/local/logstash/etc/hello_search.conf输入下面:input { stdin { type => "human" }}output { stdout { codec => rubydebug } elasticsearch { ...
分类:
其他好文 时间:
2015-10-21 12:36:53
阅读次数:
385
最近在调研InfluxDB的时候接触到了Grafana,Grafana是什么?一个类似Kibana的东西,也是对后端的数据进行实时展示,那么Grafana和Kibana有什么区别?在我看来区别不大,不过在大家的日常使用中Kibana是跟着Logst...
分类:
其他好文 时间:
2015-10-10 12:56:10
阅读次数:
275
1、logstash无法启动,提示bind address原因:1)配置目录下存在多个配置文件,而logstash会加载所有conf格式的文件解决方案:删除不必要的,保留一个conf文件即可2)进程未结束解决方案:kill -9 pid 强制结束进程,再启动服务即可2、kibana无法解析出日志的相...
分类:
其他好文 时间:
2015-09-29 18:23:31
阅读次数:
416
ELKstack是Elasticsearch、Logstash、Kibana三个开源软件的组合。目前都在Elastic.co公司名下。
ELK是一套常用的开源日志监控和分析系统,包括一个分布式索引与搜索服务Elasticsearch,
一个管理日志和事件的工具logstash,和一个数据可视化服务Kibana
logstash_1.5.3负责日志..
分类:
其他好文 时间:
2015-09-23 10:38:46
阅读次数:
334
Log4j插件可以通过log4j.jar获取Java日志,搭配Log4j的SocketAppender和SocketHubAppender使用,常用于简单的集群日志汇总。最小化的配置input { log4j { host=>"localhost" port=>45...
分类:
其他好文 时间:
2015-09-22 23:21:07
阅读次数:
243
环境信息:CentOS 6.5redis 3.0.4logstashelasticsearchkibana服务端ip:192.168.0.65客户端ip:192.168.0.66关系结构图:图片引用自:http://www.wklken.me/posts/2015/04/26/elk-for-ngi...
分类:
其他好文 时间:
2015-09-21 14:09:34
阅读次数:
203
Logstash-plugins github address :?https://github.com/logstash-plugins 1、安装好 ruby 环境 2、下载插件包,例如: 0>?wget?https://github.com/logstash-plugins/logstash-filter-aggregate?
0>?unzip...
分类:
其他好文 时间:
2015-09-18 18:59:51
阅读次数:
195