一、ELK基础1、ELK简介ELK本质上是三个软件的组合，通过这三个软件的组合可以实现构建一个日志的收集、分析、展示的平台，也就是说借助于ELK可以实现把收集到的日志信息以饼图、柱形图、曲线图等直观的方式展示出来。ELK的三个组件如下：kibana：这个组件用来展示数据，用户访问的时候是访问kibanaelaticsearch简称es：用来存储数据的，kibana中所展示的数据都是来自于eslog
分类：
其他好文 时间：
2020-12-15 12:56:41
阅读次数：
7
1、题记Elasticsearch有没有类似mysql的distinct的去重功能呢？1）如何去重计数？类似mysql:selectdistinct(count(1))frommy_table;2）如何获取去重结果。类似mysql：SELECTDISTINCTname,ageFROMusers;2、需求1）对ES的检索结果进行去重统计计数。2）对ES的检索结果去重后显示。3、分析1）统计计数需要借
分类：
其他好文 时间：
2020-12-15 12:29:48
阅读次数：
2
1、问题源自星球同学的提问：es如何与hive或mysql结合使用？es不支持事务有什么好的弥补方案吗？2、事务的核心概念如果一个数据库声称支持事务的操作，那么该数据库必须要具备以下ACID四个特性：原子性（Atomicity）原子性是指事务包含的所有操作要么全部成功，要么全部失败回滚，一致性（Consistency）一致性是指事务必须使数据库从一个一致性状态变换到另一个一致性状态，也就是说一个事
分类：
其他好文 时间：
2020-12-15 12:29:15
阅读次数：
3
题记来自Elasticsearch中文社区的问题——MySQL中表无唯一递增字段，也无唯一递增时间字段，该怎么使用logstash实现MySQL实时增量导数据到es中？logstash和kafka_connector都仅支持基于自增id或者时间戳更新的方式增量同步数据。回到问题本身：如果库表里没有相关字段，该如何处理呢？本文给出相关探讨和解决方案。1、binlog认知1.1啥是binlog？bin
分类：
数据库 时间：
2020-12-15 12:28:58
阅读次数：
5
抗锯齿问题在游戏中一直存在的，尤其是体现在3D模型上的材质或者游戏UI界面上，由于现在引擎都非常完善，并且引擎都提供了抗锯齿功能，我们通过引擎提供的参数界面设置一下就可以消除。但是很多读者并不明白为何设置一下就可以消除掉，或者根本没有去研究，本篇博客给读者揭秘这些技术原理。 锯齿边(Jagged E ...
分类：
其他好文 时间：
2020-12-15 12:09:24
阅读次数：
2
ES集群下线节点扩容，然后在上线 1、将节点从集群路由策略中排除 PUT _cluster/settings { "transient" : { "cluster.routing.allocation.exclude._name" : "node-1" } } 2、等待节点上分片全部被迁移 3、下线 ...
分类：
其他好文 时间：
2020-12-14 13:34:02
阅读次数：
4
一 索引模板（用于通过模板匹配匹配到的所有索引） 详细请点击 { "order": 0, // 模板优先级 "template": "sample*", // 模板匹配的名称方式 "settings": {...}, // 索引设置 "mappings": {...}, // 索引中各字段的映射定义 ...
分类：
其他好文 时间：
2020-12-11 12:09:24
阅读次数：
5
少点代码，多点头发本文已经收录至我的GitHub,欢迎大家踊跃star和issues。https://github.com/midou-tech/articles看文章有两点需要注意：本公号讲解的Elasticsearch是基于7.7.0版本，你们在阅读一些相关书籍和博客注意版本，不同版本很多概念会有出入。文章写作过程中会经常将Elasticsearch简写为Es，阅读过程中需要注意。一般学习一个
分类：
其他好文 时间：
2020-12-11 11:41:55
阅读次数：
2
本文已经收录至我的GitHub,欢迎大家踊跃star和issues。https://github.com/midou-tech/articles题外话这次本来是准备用filebeat写数据到es，然后下一篇写查询语法和一些查询操作。就在我要写数据的时候，发现不对啊。mapping配置什么的都不知道，只是把数据塞进去了，完全不知道数据怎么结构化存储的，也不知道怎么查询。一般去对接es业务，都需要告诉
分类：
移动开发 时间：
2020-12-11 11:39:48
阅读次数：
7
PEG（Parsing Expression Grammar），翻译为解析表达文法。按照WIKI给出的描述，一个解析表达文法由以下部分组成： 一个有限的非终结符的集合 N 一个有限的终结符的集合 Σ，和 N 没有交集 一个有限的解析规则的集合 P 一个被称作开始表达式的解析表达式 eS P 中的每一 ...
分类：
其他好文 时间：
2020-12-10 10:56:51
阅读次数：
3
