超过最大分片引起的,在es机器上执行:curl -XPUT -H "Content-Type:application/json" -d '{"persistent":{"cluster":{"max_shards_per_node":10000}}}' 'http://es-host:9200/_c ...
分类:
其他好文 时间:
2021-05-25 17:41:51
阅读次数:
0
问题 nginx日志默认记录在一个文件access.log中,时间长了会导致日志文件特别大,甚至磁盘占满。 解决方案 使用以下方法,将access.log文件每天一个,然后清过15天以前的文件。 方法 创建clearNginxLog.sh文件 #!/bin/bash LOG_PATH="/data/ ...
分类:
其他好文 时间:
2021-05-24 16:43:57
阅读次数:
0
安装完haproxy后默认是没有启用日志的,如果需要日志配置,那么需要结合rsyslog 修改haproxy配置 在全局配置段中配置,定义日志记录级别。 global log 127.0.0.1 local3 info 修改rsyslog配置 #日志传输基于udp,所以需要取消这两行的注释。 [ro ...
分类:
其他好文 时间:
2021-05-24 03:50:05
阅读次数:
0
#1. 安装依赖 yum install glib2 glib2-devel GeoIP-devel ncurses-devel zlib zlib-devel -y wget https://github.com/maxmind/geoip-api-c/releases/download/v1.6 ...
分类:
其他好文 时间:
2021-05-04 15:25:34
阅读次数:
0
2021-04-21T12:36:52.697398000Z [2021-04-21T12:36:52,696][WARN ][logstash.licensechecker.licensereader] Attempted to resurrect connection to dead ES in ...
分类:
其他好文 时间:
2021-04-22 16:14:06
阅读次数:
0
一、简介 LogAnalyzer是一款syslog日志和其他网络事件数据的Web前端。它提供了对日志的简单浏览、搜索、基本分析和一些图表报告的功能。数据可以从数据库或一般的syslog文本文件中获取,所以LogAnalyzer不需要改变现有的记录架构。基于当前的日志数据,它可以处理syslog日志消 ...
分类:
数据库 时间:
2021-04-21 11:57:28
阅读次数:
0
1.1 Elasticsearch 是什么 The Elastic Stack, 包括 Elasticsearch、Kibana、Beats 和 Logstash(也称为 ELK Stack)。能够安全可靠地获取任何来源、任何格式的数据,然后实时地对数据进行搜索、分析和可视化。Elaticsearc ...
分类:
其他好文 时间:
2021-04-19 15:27:46
阅读次数:
0
采集nginx日志的时候发现从filebeat采集的json日志到elasticsearch里面都是keyword类型,导致我模糊查询部分字段的时候无法模糊匹配,所以需要将某些字段改成text类型。 filebeat.inputs: - type: log enabled: true json.ke ...
分类:
移动开发 时间:
2021-03-30 13:11:53
阅读次数:
0
大数据技术板块划分 数据采集 flume kafka logstash filebeat ... 数据存储 mysql redis hbase hdfs ... 虽然mysql不属于大数据范畴 但是我在这也列出来了,因为你在工作中离不开它 数据查询 hive impala elasticsearch ...
分类:
其他好文 时间:
2021-03-17 14:04:41
阅读次数:
0
日志进程rsyslog httpd/nginx/mysql: 各类应用程序,可以以自己的方式记录日志 Rsyslog 是处理系统相关日志的进程 处理日志的进程 rsyslog rsyslog可以处理绝大部分日志记录,比如系统操作有关信息,如登录信息,程序的启动关闭信息 [root@CatdeXin- ...
分类:
其他好文 时间:
2021-02-27 13:03:19
阅读次数:
0