[toc] 转发https://www.cnblogs.com/clsn/p/8428257.html 一、关于日志切割 日志文件包含了关于系统中发生的事件的有用信息,在排障过程中或者系统性能分析时经常被用到。对于忙碌的服务器,日志文件大小会增长极快,服务器会很快消耗磁盘空间,这成了个问题。除此之外 ...
分类:
系统相关 时间:
2020-01-19 12:41:15
阅读次数:
106
程序简介 通过分析nginx日志,统计出nginx流量(统计nginx日志中 $body_bytes_sent 字段),能自定义时间间隔,默认时间间隔为5分钟,单位为分钟。 输出结果 开始时间结束时间分割线统计流量 2019-11-23 03:26:00 2019-11-23 04:26:00 < ...
分类:
其他好文 时间:
2020-01-16 19:19:23
阅读次数:
373
前提Logstash需要依赖elasticsearch,所以在安装Logstash之前先安装elasticsearch 官方地址 https://www.elastic.co/guide/en/logstash/current/installing-logstash.html 指向当前版本 针对6. ...
分类:
其他好文 时间:
2020-01-14 09:51:56
阅读次数:
73
1.ELK搭建 关于ELK环境搭建在之前的博客都已经提到了。 Elasticsearch安装Head插件 安装Logstash 安装Kibana 2.项目示例 2.1添加依赖 <!--elk依赖 --> <dependency> <groupId>net.logstash.logback</grou ...
分类:
编程语言 时间:
2020-01-13 17:56:58
阅读次数:
90
对于Linux系统安全来说,日志文件是极其重要的工具。不知为何,我发现很多运维同学的服务器上都运行着一些诸如每天切分Nginx日志之类的CRON脚本,大家似乎遗忘了Logrotate,争相发明自己的轮子,这真是让人沮丧啊!就好比明明身边躺着现成的性感美女,大家却忙着自娱自乐,罪过!logrotate ...
分类:
编程语言 时间:
2020-01-13 16:25:09
阅读次数:
112
说明 /logstash/config/logstash.yml:主要用于控制logstash运行时的状态 /logstash/config/startup.options:logstash 运行相关参数 配置参数说明 logstash.yml 参数 用途 默认值 node.name 节点名称 主机 ...
分类:
其他好文 时间:
2020-01-13 11:13:18
阅读次数:
107
1.导入数据 批量导入数据并查看 1.1 导入数据 1) 使用POST方式批量导入数据,数据格式为json,url 编码使用data-binary导入含有index配置的json文件 ]# scp /var/ftp/elk/*.gz 192.168.1.66:/root/ kibana ~]# gz ...
分类:
其他好文 时间:
2020-01-13 10:54:26
阅读次数:
159
1. ES集群安装 准备1台虚拟机 部署elasticsearch第一个节点 访问9200端口查看是否安装成功 1ELK是日志分析平台,不是一款软件,而是一整套解决方案,是三个软件产品的首字母缩写,ELK分别代表: Elasticsearch:负责日志检索和储存 Logstash:负责日志的收集和分 ...
分类:
其他好文 时间:
2020-01-13 10:51:29
阅读次数:
82
参考: https://chenguolin.github.io/2019/03/02/Fluentd-5-Fluentd%E6%8F%92%E4%BB%B6%E5%BC%80%E5%8F%91/ http://denghb.com/wiki/ELKstack-guide-cn/logstash/s ...
分类:
其他好文 时间:
2020-01-11 23:48:34
阅读次数:
102
安装logstash查看我的另一篇文章 Docker 部署 logstash 同步数据我们首先需要安装好对应的插件,然后下载对应的数据库链接jar包,下面是具体的步骤 一、安装logstash-input-jdbc 1、进入容器中 docker exec it logstash bash 2、进入到 ...
分类:
数据库 时间:
2020-01-09 13:17:52
阅读次数:
104