官方的安装指令是:bin/plugininstalllogstash-output-webhdfs但是往往安装不成功，一般就是如下情况，然后卡着不动了:Validatinglogstash-output-webhdfs。。。原因是防火墙挡掉了logstash的默认gemsourcecatGemfile|grepsource
#source"https://rubygems.org"修改gemsource为..
分类：
其他好文 时间：
2016-11-10 21:49:17
阅读次数：
412
elk开源分布式日志分析平台一.简介1.核心组成2.三大组件3.elk的工作流程4.elk的帮助手册二.Logstash和elasticsearch(elasticsearch和logstash依赖java环境)1.java2.nginx的安装3.redis的安装4.安装elasticsearch5.安装logstash6.安装kibana三.检验elk的日志结果一.简介1.核心组..
分类：
其他好文 时间：
2016-11-07 08:27:40
阅读次数：
252
server：192.168.1.123 client:192.168.1.132 1.server配置 1)编辑 /etc/rsyslog.conf s2） 2)重启rsyslog服务 systemctl restart rsyslog3)查看服务监听的状态 netstat -anlpt| gre ...
分类：
其他好文 时间：
2016-11-05 23:42:28
阅读次数：
183
1.编辑/etc/rsyslog.conf 输入 local 0 .* /var/log/sshd.log #日志的保存路径 2.定义ssh服务的日志级别 编辑sshd服务的主配置文件：/etc/ssh/sshd_config 3.使配置生效 1）重启rsyslog服务(生效配置) systemct ...
分类：
其他好文 时间：
2016-11-05 23:24:36
阅读次数：
314
1.日志分类Nginx日志主要分为两种：访问日志和错误日志。日志开关在nginx配置文件中（nginx.conf）设置，两种日志都可以选择性关闭。1.1访问日志1.1.1简介访问日志主要记录客户端访问nginx的每一个请求，格式可以自定义。通过访问日志，你可以得到用户地域来源、跳转来源、使用..
分类：
其他好文 时间：
2016-11-05 03:22:28
阅读次数：
309
语法:log_formatnamestring…;默认值:log_formatcombined“…”;log_formataccess_format‘$remote_addr-$remote_user[$time_local]"$request"‘$status$body_bytes_sent"$http_referer"‘‘"$http_user_agent""$http_x_forwarded_for"‘;access_loglogs/access.logaccess_format;$r..
分类：
其他好文 时间：
2016-11-04 17:54:32
阅读次数：
135
一、Kibana之Visualize 功能 在首页上Visualize 标签页用来设计可视化图形。你可以保存之前在discovery中的搜索来进行画图，然后保存该visualize，或者加载合并到 dashboard 里。一个可视化可以基于以下几种数据源类型：一个新的交互式搜索一个已保存的搜索一个已 ...
分类：
其他好文 时间：
2016-11-01 00:55:13
阅读次数：
544
日志管理 我们观察nginx的server段,可以看到如下类似信息 #access_log logs/host.access.log main; 这说明 该server, 它的访问日志的文件是 logs/host.access.log , 使用的格式”main”格式. 除了main格式,你可以自定义 ...
分类：
其他好文 时间：
2016-10-30 19:16:07
阅读次数：
181
因为发的时候，有些敏感信息没去除，所以大家发文的时候，切记要过滤。不然抓取的很厉害。这个脚本的作用是同步远程机器的少量log到一台机器上，然后通过logstash过滤显示犯了好几个错误local写错locals，locals是python特有定义变量的，不能重名sftp老报错，IOError:[Errno2]N..
分类：
编程语言 时间：
2016-10-29 02:38:19
阅读次数：
448
Master机器运行命令： Slave中只开启lagstash并将相关log指向主ELK服务器： 启动后logstash会报错，因为默认指向本地的elasticsearch服务，登录到docker更改配置文件： 此时slave的logstash可以正常运行。 添加监控文件： 使用以下命令启动logs ...
分类：
其他好文 时间：
2016-10-28 19:39:49
阅读次数：
220
