一、环境系统CentOS6.4x64最小化安装elk-search1192.168.3.71elk-search2192.168.3.72二、安装jdk[root@elk-search1~]#ll|greptar.gz
-rw-r--r--1rootroot28478292Mar1715:36elasticsearch-1.7.2.tar.gz
-rw-r--r--1rootroot173271626Mar1715:39jdk-8u45-linux-x64.tar.gz
-rw-..
分类:
其他好文 时间:
2016-03-17 19:51:06
阅读次数:
390
作者:Danbo 时间:2016-03-13 Logstash可以试用不同的协议实现完成将数据写入Elasticsearch的工作,本节中介绍HTTP方式。 配置示例: 解释: 批量发送 flush_size 和 idle_flush_time 共同控制Logstash向 Elasticsearch
分类:
其他好文 时间:
2016-03-13 23:54:35
阅读次数:
348
WAF全称叫Web Application Firewall,web应用防火墙 最近公司网页发现有人天天在刷单,ELk真心不错,能多维度的发现这些问题。所以现在考虑给nginx增加个WAF模块,找了个老外的ModSecurity,下面讲下如何安装 1、安装依赖rpm包 yum -y install
分类:
其他好文 时间:
2016-03-10 14:45:42
阅读次数:
811
$gemsources--removehttps://rubygems.org/$gemsources-ahttps://ruby.taobao.org/$gemsources-l/usr/local/logstash/vendor/jruby/bin/geminstalllogstash-output-zabbixvim/usr/local/logstash/Gemfilehttps://ruby.taobao.org/usr/local/logstash/bin/plugininstall/usr/loc..
分类:
其他好文 时间:
2016-03-07 19:26:00
阅读次数:
579
前提:处理大数据日志收集分析,随着搜索集群的快速膨胀,大量日志处理及情况反馈滞后带来一系列问题,亟需一个工具能快速分析定位集群中那种日志或那个机器出现了异常。运维的日志分析系统定制化较重,分析不够实时。故找一个RTF工具可以直接即上手。1、简介:logstash日志收..
分类:
其他好文 时间:
2016-03-04 16:35:09
阅读次数:
436
[root@elk_m ~]# awk '{print $0}' install.log.syslog |head -1 <86>Feb 29 02:58:28 groupadd[1598]: group added to /etc/group: name=dbus, GID=81 不想要的话就$n
分类:
其他好文 时间:
2016-03-01 14:29:59
阅读次数:
173
ELK是elasticsearchlogstashkibana的组合;这里简单的说一下如何在centos6.x系统下安装,后续写如何使用这些软件;这里是根据官网推荐使用yum的方法安装的;1.elasticsearchrpm--importhttps://packages.elastic.co/GPG-KEY-elasticsearccat/etc/yum.repos.d/elsticsearch.repo[..
分类:
其他好文 时间:
2016-02-24 09:59:45
阅读次数:
163
转自:http://blog.csdn.net/lively1982/article/details/50678657 ELK是Elasticsearch、Logstash、Kibana的简称,这三者是核心套件,但并非全部。后文的四种基本架构中将逐一介绍应用到的其它套件。 Elasticsearch
分类:
其他好文 时间:
2016-02-22 17:04:02
阅读次数:
197
前言:理论上应该是一周一篇的说,但上一周回湖南浪去了,so~~~~,再者这并不是公司项目,全是自己临时起意,所以业余时间写写~~~更新也许不会太快。下面是个人的一些思路以及大概每篇文章的内容,也许并不规范,为了不让这篇文章看起来太干,所以第三部分放一些所谓的干货,通过..
分类:
移动开发 时间:
2016-01-31 17:26:08
阅读次数:
483
公司使用的快网的CDN,但是快网本身并不提供日志的分析统计,我这里还没有用elk,无奈只能先使用shell对日志进行分析统计,作为运维组对业务情况的一个大致的了解。脚本是对前一天的CDNLOG进行解压缩分析,最后将结果按类输出到指定目录,再将这些结果打包扔回CDNLOG目录,因为..
分类:
其他好文 时间:
2016-01-25 17:26:35
阅读次数:
200