一、Logstash Logstash诞生于2009年8月，2013年被ElasticSearch公司收购。Logstash是一个分布式日志收集框架，开发语言是JRuby，经常与ElasticSearch，Kibana配合使用组成著名的ELK技术栈，所谓ELK就是ElasticSearch、Logs ...
分类：
其他好文 时间：
2021-06-10 17:43:01
阅读次数：
0
一、nginx日志结构 nginx中access.log 的日志结构： $remote_addr 客户端地址 211.28.65.253 $remote_user 客户端用户名称 -- $time_local 访问时间和时区 18/Jul/2012:17:00:01 +0800 $request 请 ...
分类：
其他好文 时间：
2021-06-08 22:56:51
阅读次数：
0
1 下载解压elasticsearch tar -zxvf elasticsearch-7.6.1-linux-x86_64.tar.gz 2）修改config/elasticsearch.yml vim config/elasticsearch.yml cluster.name: my-appli ...
分类：
系统相关 时间：
2021-06-03 18:02:47
阅读次数：
0
要谈ELK的应用，就不得不谈ELK架构。下面介绍几种工程项目中最常用的架构，并讨论四种架构所适合的场景。当然，在实际场景选择架构时，只要能满足当前需求就好，同时现有架构也要有一定的可预见性，为架构的演进预留一定的扩展性。 1. 简单模式（logstash+elasticsearch+kibana） ...
分类：
其他好文 时间：
2021-06-03 17:53:59
阅读次数：
0
我们可以设置集群的平衡参数来暂时禁用掉平衡，具体步骤如下： 1.如果可能的话，先暂停掉数据新增和更新操作，这样会提高集群恢复的时间； 2.禁用集群分片平衡操作，直到告诉集群可以恢复平衡操作为止，禁用配置方式： PUT /_cluster/settings { "transient" : { "clu ...
分类：
其他好文 时间：
2021-06-02 12:58:20
阅读次数：
0
前期准备 docker环境... 0_镜像_查询 [root@iZ2zeca7jric8sx4f3n7spZ ~]# docker search elasticsearch NAME DESCRIPTION STARS OFFICIAL AUTOMATED elasticsearch Elastic ...
分类：
其他好文 时间：
2021-06-02 12:27:50
阅读次数：
0
说明 适用平台：头歌（Educoder）实践教学平台 适用实训： Hive综合应用案例——学生成绩查询 Hive综合应用案例——用户学历查询 Hive综合应用案例——用户搜索日志分析 注意： 看清楚上面说的实训是不是和你需要做的实训是同一个实训！！！ 如果是同一个实训，直接复制粘贴代码，然后点击测评 ...
分类：
其他好文 时间：
2021-06-02 11:35:33
阅读次数：
0
为了Skywalking 准备 elasticsearch 至少 需要2G内存 docker pull elasticsearch:7.9.3 docker run --name elasticsearch -p 9200:9200 -p 9300:9300 \ -e "discovery.type ...
分类：
其他好文 时间：
2021-05-24 16:43:33
阅读次数：
0
安装 官网下载 https://www.elastic.co/downloads/past-releases/elasticsearch-5-2-2 安装包 解压 Elasticsearch安装包 tar -zxvf elasticsearch-5.6.2.tar.gz elasticsearch ...
分类：
其他好文 时间：
2021-05-24 15:58:16
阅读次数：
0
典型问题之一：Elasticsearch集群的磁盘被打爆 造成磁盘被打爆有以下几种原因： 索引泛滥，索引接入无流程管控； 索引无生命周期管理； 索引分片数量不合理，单分片过大； 日志类索引未按天等细粒度划分，单索引过大； 多集群复用同一服务器节点； 磁盘容量大小不一。 这些问题比较基础，其实也反映出 ...
分类：
其他好文 时间：
2021-05-24 12:58:48
阅读次数：
0
