一、Logstash Logstash诞生于2009年8月,2013年被ElasticSearch公司收购。Logstash是一个分布式日志收集框架,开发语言是JRuby,经常与ElasticSearch,Kibana配合使用组成著名的ELK技术栈,所谓ELK就是ElasticSearch、Logs ...
分类:
其他好文 时间:
2021-06-10 17:43:01
阅读次数:
0
1 下载解压elasticsearch tar -zxvf elasticsearch-7.6.1-linux-x86_64.tar.gz 2)修改config/elasticsearch.yml vim config/elasticsearch.yml cluster.name: my-appli ...
分类:
系统相关 时间:
2021-06-03 18:02:47
阅读次数:
0
要谈ELK的应用,就不得不谈ELK架构。下面介绍几种工程项目中最常用的架构,并讨论四种架构所适合的场景。当然,在实际场景选择架构时,只要能满足当前需求就好,同时现有架构也要有一定的可预见性,为架构的演进预留一定的扩展性。 1. 简单模式(logstash+elasticsearch+kibana) ...
分类:
其他好文 时间:
2021-06-03 17:53:59
阅读次数:
0
我们可以设置集群的平衡参数来暂时禁用掉平衡,具体步骤如下: 1.如果可能的话,先暂停掉数据新增和更新操作,这样会提高集群恢复的时间; 2.禁用集群分片平衡操作,直到告诉集群可以恢复平衡操作为止,禁用配置方式: PUT /_cluster/settings { "transient" : { "clu ...
分类:
其他好文 时间:
2021-06-02 12:58:20
阅读次数:
0
前期准备 docker环境... 0_镜像_查询 [root@iZ2zeca7jric8sx4f3n7spZ ~]# docker search elasticsearch NAME DESCRIPTION STARS OFFICIAL AUTOMATED elasticsearch Elastic ...
分类:
其他好文 时间:
2021-06-02 12:27:50
阅读次数:
0
超过最大分片引起的,在es机器上执行:curl -XPUT -H "Content-Type:application/json" -d '{"persistent":{"cluster":{"max_shards_per_node":10000}}}' 'http://es-host:9200/_c ...
分类:
其他好文 时间:
2021-05-25 17:41:51
阅读次数:
0
为了Skywalking 准备 elasticsearch 至少 需要2G内存 docker pull elasticsearch:7.9.3 docker run --name elasticsearch -p 9200:9200 -p 9300:9300 \ -e "discovery.type ...
分类:
其他好文 时间:
2021-05-24 16:43:33
阅读次数:
0
安装 官网下载 https://www.elastic.co/downloads/past-releases/elasticsearch-5-2-2 安装包 解压 Elasticsearch安装包 tar -zxvf elasticsearch-5.6.2.tar.gz elasticsearch ...
分类:
其他好文 时间:
2021-05-24 15:58:16
阅读次数:
0
典型问题之一:Elasticsearch集群的磁盘被打爆 造成磁盘被打爆有以下几种原因: 索引泛滥,索引接入无流程管控; 索引无生命周期管理; 索引分片数量不合理,单分片过大; 日志类索引未按天等细粒度划分,单索引过大; 多集群复用同一服务器节点; 磁盘容量大小不一。 这些问题比较基础,其实也反映出 ...
分类:
其他好文 时间:
2021-05-24 12:58:48
阅读次数:
0
扫描以下常见未授权访问 redis、mongodb、memcached、elasticsearch、zookeeper、ftp、CouchDB、docker、Hadoop 安装 pip3 install -r requirements.txt -i https://mirrors.aliyun.co ...
分类:
其他好文 时间:
2021-05-24 08:32:18
阅读次数:
0