码迷,mamicode.com
首页 >  
搜索关键字:logstash rsyslog nginx日志    ( 2329个结果
ubuntukylin-16.04 安装nginx
ubuntukylin-16.04 中安装nginx 1.安装nginx sudo apt-getinstall nginx nginx安装之后的文件结构大致为: 所有的配置文件都在/etc/nginx下,并且每个虚拟主机已经安排在了/etc/nginx/sites-available下 程序文件在/usr/sbin/nginx 日志放在了/var/log/ng...
分类:系统相关   时间:2016-05-12 23:01:07    阅读次数:489
Logstash之日志多行合一行(日志错行)
我们在用Logstash收集日志的时候会碰到日志会错行,这个时候我们需要把错的行归并到上一行,使某条数据完整;也防止因为错行导致其他字段的不正确。 在Logstash-filter插件中,multiline插件可以解决这个问题,举个例子如下: 假如我们的日志形式如下: 2016-04-05 13:39:52.534 1.28.253.193 20160311090433074f5b47c04...
分类:其他好文   时间:2016-05-12 18:28:06    阅读次数:669
JMXProxyBeat
项目中监控框架中用到JMXProxyBeat,在此学习已做记录。 官网文档位置https://github.com/radoondas/jmxproxybeat。 JMXProxyBeat 是一个简单的beat,检索tomcat jmx中的指标值的工具。检索出的数据提供给LogStash或者Elasticsearch呈现。jmx指标是通过在tomcat中配置“JMX Proxy Ser...
分类:其他好文   时间:2016-05-12 12:51:23    阅读次数:271
Centos安装配置HAProxy+Nginx环境
在测试环境安装了一下Nginx(作为http服务器)和HAProxy(反向代理),并配置HAProxy的日志输出到/var/log/haproxy.log,笔记一下。需要说明的是,这里仅涉及基本的安装、配置方法,并不涉及生产环境中的具体用法。一、安装Nginx1、准备环境yuminstall-ygcc#一般都有 yuminstal..
分类:其他好文   时间:2016-05-12 00:04:50    阅读次数:386
ELK集群部署及收集nginx日志
一、ELK说明二、架构图三、规划说明四、安装部署nginx+logstash五、安装部署redis六、安装部署logstashserver七、安装部署elasticsearch集群八、安装kibana一、ELK说明ELKStack是Elasticsearch、Logstash、Kibana三个开源软件的组合。在实时数据检索和分析场合,三者通常是配合..
分类:其他好文   时间:2016-05-11 20:03:24    阅读次数:358
nginx模块开发(18)—日志分析
1、日志简介 nginx日志主要有两种:访问日志和错误日志。访问日志主要记录客户端访问nginx的每一个请求,格式可以自定义;错误日志主要记录客户端访问nginx出错时的日志,格式不支持自定义。两种日志都可以选择性关闭。 通过访问日志,你可以得到用户地域来源、跳转来源、使用终端、某个URL访问量等相 ...
分类:其他好文   时间:2016-05-11 18:03:24    阅读次数:239
ELK中如何搭建客户端客户端如何将日志发送给服务端的logstash
【背景】我们要统一收集日志,统一分析,统一在一个平台上搜索过滤日志!在上一篇中已经完成了ELK的搭建,那么该如何将每台客户端的日志集中到ELK平台中呢?【本系统介绍】ELK--192.168.100.10(这个地方要有FQDN创建SSL证书的时候需要配置FQDN,www.elk.com)被收集日志的客户端..
分类:其他好文   时间:2016-05-10 23:48:15    阅读次数:2647
python处理nginx日志,并统计分析---我这个写的处理时间效率不高,有好方法,请大家指正
实际工作中,恰好需要处理一个nginx日志,做个简单的分析:引子:开发已经有日志分析平台和工具,但为了查一个问题,需要分析原始日志。要求:原始日志的倒数第二个字段不为空且不为‘-‘的情况下,统计倒数第四个字段不为空且不为‘-‘的且不重复的个数。python脚本如下:#!/usr/b..
分类:编程语言   时间:2016-05-08 20:05:55    阅读次数:786
ngxtop nginx 日志实时峰分析
安装ngxtopwgethttp://pypi.python.org/packages/source/s/setuptools/setuptools-0.6c11.tar.gztarzxvfsetuptools-0.6c11.tar.gzcdsetuptools-0.6c11pythonsetup.pybuildpythonsetup.pyinstallwgethttps://pypi.python.org/packages/source/p/pip/pip-7.1.2.tar.gz#md5=3823d2..
分类:其他好文   时间:2016-05-08 01:23:14    阅读次数:148
Elasticsearch+Logstash+Kibana教程
参考资料 累了就听会歌吧! Elasticsearch中文参考文档 Elasticsearch官方文档 Elasticsearch 其他——那些年遇到的坑 Elasticsearch 管理文档 Elasticsearch集群配置以及REST API使用 Elasticsearch集群管理 Elast ...
分类:其他好文   时间:2016-05-07 18:01:25    阅读次数:225
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!