1、日志路径 Nginx日志包括error_log和access_log,在/etc/nginx/nginx.conf中有配置。 error_log:主要记录nginx处理http请求的错误状态,以及nginx本身服务运行的错误状态。 access_log:记录nginx每一次http请求的访问状态 ...
分类:
其他好文 时间:
2020-05-02 18:42:17
阅读次数:
58
原文地址: 先认识几个东西: 1、Elasticsearch : 开源分布式搜索引擎,它的特点有:分布式,零配置,自动发现,索引自动分片,索引副本机制, restful 风格接口,多数据源,自动搜索负载等。 2、Logstash : 完全开源的工具,对日志进行收集、分析,并将其存储供以后使用(如,搜 ...
分类:
其他好文 时间:
2020-05-01 16:48:36
阅读次数:
89
一、将Linux系统日志通过Rsyslog输出到syslog服务器 Rsyslog是linux系统下高速的日志收集处理服务,它具有高性能、安全可靠和模块化设计的特点,能够接收各种来源的日志输入(例如:file,tcp,udp,uxsock等),并通过处理后将结果输出的不同的目的地(例如:mysql, ...
分类:
系统相关 时间:
2020-04-26 12:38:28
阅读次数:
80
一:配置文件 etc是linux系统放置核心配置的文件夹 /etc/logrotate.d/nginx 配置文件 用于nginx日志轮转,logrotate服务的日志切割 /etc/nginx 目录配置文件 nginx的主要配置文件 /etc/nginx/nginx.conf 主要配置文件 ngin ...
分类:
其他好文 时间:
2020-04-25 20:49:08
阅读次数:
92
1、logstash简介? logstash是一个数据分析软件,主要目的是分析log日志。整一套软件可以当作一个MVC模型,logstash是controller层,Elasticsearch是一个model层,kibana是view层。首先将数据传给logstash,它将数据进行过滤和格式化(转成... ...
分类:
其他好文 时间:
2020-04-24 01:35:41
阅读次数:
57
最近公司在使用elasticsearch,使用的是6.5版本的。其中有一个需求就是需要把数据库已有的数据同步到elasticsearch中来,调研了几种方案。 logstash,elasticsearch-jdbc,自己实现。 暂时采用的是elasticsearch-jdbc,但是,同步的过程中,出 ...
分类:
数据库 时间:
2020-04-23 23:29:23
阅读次数:
297
作者:万能付博 链接:Docker安装部署ELK教程 (Elasticsearch+Kibana+Logstash+Filebeat) Docker安装部署ELK教程 (Elasticsearch+Kibana+Logstash+Filebeat) ELK是由 Elasticsearch、Logst ...
分类:
其他好文 时间:
2020-04-20 21:40:54
阅读次数:
110
Apache日志 访问日志access_log记录了所有对Web服务器的访问活动,下面是访问日志access_log中的一个标准记录 192.168.43.117 - - [01/Apr/2018:10:37:19 +0800] "GET / HTTP/1.1" 200 45 日志字段所代表的内容如 ...
分类:
Web程序 时间:
2020-04-19 19:50:27
阅读次数:
131
Elasticsearch 6.4.3 logstash 6.4.3 及 ik 6.4.3 中文分词器下载 elasticsearch-6.4.3.tar.gz logstash-6.4.3.tar.gz elasticsearch-analysis-ik-6.4.3.zip 下载链接 链接:htt ...
分类:
其他好文 时间:
2020-04-19 17:36:26
阅读次数:
200
目前mysql与elasticsearch常用的同步机制大多是基于插件实现的,常用的插件包括:elasticsearch-jdbc,elasticsearch-river-MySQL,go-mysql-elasticsearch,logstash-input-jdbc。本文对四种插件的优缺点进行了图 ...
分类:
数据库 时间:
2020-04-17 09:49:40
阅读次数:
306