典型问题之一：Elasticsearch集群的磁盘被打爆 造成磁盘被打爆有以下几种原因： 索引泛滥，索引接入无流程管控； 索引无生命周期管理； 索引分片数量不合理，单分片过大； 日志类索引未按天等细粒度划分，单索引过大； 多集群复用同一服务器节点； 磁盘容量大小不一。 这些问题比较基础，其实也反映出 ...
分类：
其他好文 时间：
2021-05-24 12:58:48
阅读次数：
0
前言 Elastic自身设计了集群分片的负载平衡机制，当有新数据节点加入集群或者离开集群，集群会自动平衡分片的负载分布。 需求背景 公司原有大数据平台基于公有云构建，由于种种原因，现在需要迁移到自建机房，Elasticsearch集群承担了大数据平台主要的对外查询需求，也有部分实时计算需求基于Ela ...
分类：
其他好文 时间：
2021-05-24 03:46:38
阅读次数：
0
参考博客：linux下ElasticSearch.6.2.2集群安装与head、Kibana、X-Pack..插件的配置安装 参考博客：ELK5.5.1 插件安装实践纪要（head/bigdesk/kopf/cerebo/中文分词插件） 参考博客：ELK构建MySQL慢日志收集平台详解 参考博客：针 ...
分类：
其他好文 时间：
2021-04-14 12:42:49
阅读次数：
0
什么是Elastic Shell Elastic Shell是一套完全用Bash Shell编写的，用于管理Elasticsearch搜索引擎的工具脚本。目前，它提供了针对index和snapshot的基本管理，并提供了针对reindex和Elasticsearch集群升级的辅助自动化。 本质上，E ...
分类：
系统相关 时间：
2021-03-15 10:42:46
阅读次数：
0
##脑裂前提 脑裂(split-brain)就是“大脑分裂”，也就是本来一个“大脑”被拆分了两个或多个“大脑”。脑裂通常会出现在集群环境中，比如ElasticSearch、Zookeeper集群，而这些集群环境有一个统一的特点，就是它们有一个大脑，比如ElasticSearch集群中有Master节 ...
分类：
其他好文 时间：
2021-03-09 13:11:53
阅读次数：
0
前言 为什么要用ElasticSearch？我们的应用经常需要添加检索功能，开源的Elastic Search是目前全文检索引擎的首选。它可以快速的存储、搜索和分析海量数据。ElasticSearch是一个分布式搜索框架，提供RestfulAPI，底层基于Lucene，采用多shard（分片）的方式 ...
分类：
其他好文 时间：
2021-01-26 12:09:17
阅读次数：
0
0、题记在写繁重的业务场景下，你是否遇到过Elasticsearch集群的性能问题？你是否遇到过Elasticsearch数据索引化速度限制问题？你是否遇到过搜索花费时间太长而无法执行的延迟问题？你是否遭遇过Elasticsearch集群故障排查的挑战？你是否努力尝试在零停机情况下提高Elasticsearch集群的稳定性？你是否想过从监控的角度去看Elasticsearch关键指标？如果你对以上
分类：
其他好文 时间：
2020-12-16 12:19:29
阅读次数：
2
Elasticsearch 产品自发布以来，随着功能不断增强，其在各种互联网产品、企业级应用产品中的应用也越来越广泛。日常 Elasticsearch 集群运维过程中，我们需要了解集群都能够输出什么类型的日志、日志的存放位置以及日志配置修改的方式，阅读本文，我们能够了解以下知识点： Elastics ...
分类：
其他好文 时间：
2020-09-24 22:00:20
阅读次数：
44
通往集群的大门 集群由什么用? 高可用 高可用(High Availability)是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。如果系统每运行100个时间单位，会有1个时间单位无法提供服务，我们说系统的可用性是99%。 负载均衡 将流量均衡的分布在不同的 ...
分类：
其他好文 时间：
2020-08-13 12:29:31
阅读次数：
50
作者：bellen，腾讯云大数据研发工程师。腾讯云Elasticsearch被广泛应用于日志实时分析、结构化数据分析、全文检索等场景中，本文将以情景植入的方式，向大家介绍与腾讯云客户合作过程中遇到的各种典型问题，以及相应的解决思路与方法，希望与大家一同交流。背景因为游戏业务本身的日志数据量非常大(写入峰值在100wqps)，在服务客户的几个月中，踩了不少坑，经过数次优化与调整，把客户的ES集群调整
分类：
其他好文 时间：
2020-08-07 10:02:01
阅读次数：
67
