更多后台运行方式参考: http://kibana.logstash.es/content/logstash/get_start/daemon.html elk常见错误: http://www.ttlsa.com/log-system/troubleshooting-elk-common-issue... ...
分类:
其他好文 时间:
2016-08-26 10:43:43
阅读次数:
193
ELK中,主要关心logstash的配置,es只是作为存储容器。 2、rubydebug格式输出 ./bin/logstash -e 'input{stdin{}}output{stdout{codec=>rubydebug}}' 3、配置文件 输出到elasticsearch 配置项 input、... ...
分类:
其他好文 时间:
2016-08-26 10:25:46
阅读次数:
191
1、安装、启动测试 2、配置、测试 因为ELK 版本更新很快,所以网上有些配置方法已经被废弃了。 logstash-2.3.4 elasticsearch-2.3.5.tar kibana-4.5.4-linux-x64.tar logstash 启动logstash,后面要加上参数 [root@l... ...
分类:
其他好文 时间:
2016-08-24 14:38:52
阅读次数:
225
http://www.gaizaoren.org/archives/408 基于主机的管理一般需要收集服务器的日志信息用于及时发现错误,处理故障。 搭建linux下的集中日志服务器的程序一般可以用syslog,rsyslog,syslog-ng,还有scribe和fluentd等。 基本每一种方式都 ...
分类:
其他好文 时间:
2016-08-24 13:07:45
阅读次数:
286
#!/bin/bash
#切割nginx的日志,然后定期删除
source/etc/profile
log_path=/usr/local/nginx/logs
d=`date+%Y-%m-%d`
d90=`date-d‘5dayago‘+%Y-%m-%d`##5天前
cd${log_path}&&cpaccess.log$log_path/backuplog/accesslog$d.log
gzip-f$log_path/backuplog/accesslog$d..
分类:
其他好文 时间:
2016-08-23 17:21:07
阅读次数:
153
简介: 第二次尝试 ELK 记录... 工作流程: 1、客户端的 Logstash 将日志信息采集到之后传输给 Redis 做消息队列 2、然后服务端的 Logstash 将日志从 Redis 中取出之后根据日志规则将数据序列化( 方便查询 )完成后存入 Elasticsearch 文本数据库中 3 ...
分类:
其他好文 时间:
2016-08-23 13:00:52
阅读次数:
176
简介: ELK 是一套开源的日志管理平台,主要包括三个组件,可以用于日志的收集、分析、存储和展示工作。 ELK 成员:Elasticsearch 、Logstash 、Kibana( K4 ) ELK 平台特性: 1、处理方式灵活,Elasticsearch 采用实时全文索引,不需要像 storm ...
分类:
其他好文 时间:
2016-08-23 12:50:58
阅读次数:
149
随着访问量的增大,如果对日志置之不理,总有一天日志文件会撑爆磁盘;所以需要我们对日志进行切割,并且每隔一段时间删除一些旧日志,防止日志无休无止的占用磁盘的空间。可以通过写一个shell脚本自动化切割,比如每天凌晨00:00把昨天的日志进行归类重命名:#cd/usr/local/sbi..
分类:
其他好文 时间:
2016-08-22 23:53:38
阅读次数:
491
由于logstash会自动将@timestamp时间转成UTC时间,网上搜了很多种方法无果后。只好从日志中提取年月日来进行按北京时间分表。日志格式JSON:{"@timestamp":"2016-08-22T09:13:06.024Z",......}input{
redis{
host=>"192.168.1.21"
port=>"6379"
key=>"filebeat"
data_..
分类:
其他好文 时间:
2016-08-22 23:46:36
阅读次数:
1204
此文只是logstash的简单入门,作者也只是简单了解logstash,本文只能简单介绍logstash,对完全不懂logstash是啥的人做个引导,因为我就是这样过来的~ 1.logstash是什么?有什么用? 在网上搜索logstash,搜索结果中logstash一般是和elasticsearc ...
分类:
其他好文 时间:
2016-08-19 01:03:57
阅读次数:
459