码迷,mamicode.com
首页 >  
搜索关键字:logstash elasticsearch kibana    ( 5824个结果
Elasticsearch 6.X 新类型Join深入详解
0、ES6.X一对多、多对多的数据该如何存储和实现呢?引出问题:“某头条新闻APP”新闻内容和新闻评论是1对多的关系?在ES6.X该如何存储、如何进行高效检索、聚合操作呢?相信阅读本文,你就能得到答案!1、ES6.X新类型Join产生背景Mysql中多表关联,我们可以通过leftjoin或者Join等实现;ES5.X版本,借助父子文档实现多表关联,类似数据库中Join的功能;实现的核心是借助于ES
分类:其他好文   时间:2020-12-15 12:30:07    阅读次数:2
Elasticsearch6.X 去重详解
1、题记Elasticsearch有没有类似mysql的distinct的去重功能呢?1)如何去重计数?类似mysql:selectdistinct(count(1))frommy_table;2)如何获取去重结果。类似mysql:SELECTDISTINCTname,ageFROMusers;2、需求1)对ES的检索结果进行去重统计计数。2)对ES的检索结果去重后显示。3、分析1)统计计数需要借
分类:其他好文   时间:2020-12-15 12:29:48    阅读次数:2
吃透 | Elasticsearch filter和query的不同
少啰嗦,直接看东西。——罗永浩1、query和filter的本质区别?以下几张图能更好的概括:query关注点:此文档与此查询子句的匹配程度如何?filter关注点:此文档和查询子句匹配吗?2、Query检索细化关注点1)是否包含?确定文档是否应该成为结果的一部分.2)相关度得分多少?除了确定文档是否匹配外,查询子句还计算了表示文档与其他文档相比匹配程度的_score。3)得分越高,相关度越高。更
分类:其他好文   时间:2020-12-15 12:29:26    阅读次数:3
探究 | Elasticsearch不支持事务有什么好的弥补方案吗?
1、问题源自星球同学的提问:es如何与hive或mysql结合使用?es不支持事务有什么好的弥补方案吗?2、事务的核心概念如果一个数据库声称支持事务的操作,那么该数据库必须要具备以下ACID四个特性:原子性(Atomicity)原子性是指事务包含的所有操作要么全部成功,要么全部失败回滚,一致性(Consistency)一致性是指事务必须使数据库从一个一致性状态变换到另一个一致性状态,也就是说一个事
分类:其他好文   时间:2020-12-15 12:29:15    阅读次数:3
干货 | Debezium实现Mysql到Elasticsearch高效实时同步
题记来自Elasticsearch中文社区的问题——MySQL中表无唯一递增字段,也无唯一递增时间字段,该怎么使用logstash实现MySQL实时增量导数据到es中?logstash和kafka_connector都仅支持基于自增id或者时间戳更新的方式增量同步数据。回到问题本身:如果库表里没有相关字段,该如何处理呢?本文给出相关探讨和解决方案。1、binlog认知1.1啥是binlog?bin
分类:数据库   时间:2020-12-15 12:28:58    阅读次数:5
实战 | canal 实现Mysql到Elasticsearch实时增量同步
题记关系型数据库Mysql/Oracle增量同步Elasticsearch是持续关注的问题,也是社区、QQ群等讨论最多的问题之一。问题包含但不限于:1、Mysql如何同步到Elasticsearch?2、Logstash、kafka_connector、canal选型有什么不同,如何取舍?3、能实现同步增删改查吗?.....本文给出答案。1、Canal同步1.1canal官方已支持Mysql同步E
分类:数据库   时间:2020-12-15 12:28:41    阅读次数:4
收集TCP/UDP日志
收集TCP/UDP日志 通过logstash的tcp/udp插件收集日志,通常用于在向elasticsearch日志补录丢失的部分日志,可以将丢失的日志通过一个TCP端口直接写入到elasticsearch服务器。 1.配置Logstash #进入Logstash配置文件目录 [root@redis ...
分类:其他好文   时间:2020-12-15 11:48:37    阅读次数:1
springboot使用rest-high-level-client集成elasticsearch 7.5.1
springboot使用rest-high-level-client集成elasticsearch 7.5.1 添加pom <!--elasticsearch--> <dependency> <groupId>org.elasticsearch.client</groupId> <artifactI ...
分类:编程语言   时间:2020-12-14 13:38:18    阅读次数:4
第一章 初识Elasticsearch
一、生活中的数据 1.数据的分类 1)结构化数据 行数据,以二维表的形式存储 2)非结构化数据 没有具体的结构,视频,文本,音乐文件 3)半结构化数据 xml表格,word文档,PPT,html文件 2.搜索的种类 1)结构化数据搜索 数据之间我们会对他建立一定的关系,生成二维表进行查询 2)非结构 ...
分类:其他好文   时间:2020-12-11 11:53:06    阅读次数:7
《Elasticsearch系列》— 开篇简介
少点代码,多点头发本文已经收录至我的GitHub,欢迎大家踊跃star和issues。https://github.com/midou-tech/articles从今天开始准备给大家带来全新的一系列文章,Elasticsearch系列新系列肯定会有很多疑惑,先为大家答疑解惑,下面是今天要讲的问题为什么写Elasticsearch系列文章?之前在文章中也陆陆续续的提到过,龙叔是做搜索引擎的。搜索引擎
分类:其他好文   时间:2020-12-11 11:42:54    阅读次数:3
5824条   上一页 1 ... 13 14 15 16 17 ... 583 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!