码迷,mamicode.com
首页 >  
搜索关键字:kibana elasticsearch    ( 5309个结果
从一个实战问题再谈 Elasticsearch 数据建模
1、上问题请问在一张订单表里,用户购买的产品是一条数据,我现在想查既购买了A又买了B的用户,这种需求能做吗?在表里存在一个用户购买了多种产品和一个产品被多个人购买的情况,每个用户购买的产品是一条单独的数据。假如现在的表已经是我上边说的那种情况了,能写出符合我查询要求的DSL吗?球友提问2、问题细化注意,类似的问题是业务问题,如果要实际落地分析,需要进一步核实确认当前的数据建模。本质一句话:数据的建
分类:其他好文   时间:2020-12-16 12:13:33    阅读次数:3
从实战中来,到实战中去——Elasticsearch 技能更快提升方法论
2011年前后,和几个同学一起去游泳馆游泳,在去的路上,我问同学A:“你会游泳吗?”,同学A滑稽的回了一句:“我的理论知识还是很扎实的”,这不经意的一句话,引起我们几个同学的哄堂大笑。当然我们也知道这是同学A开玩笑的一句话,但这则近10年前的小故事我依然时常想起,并讲给过N多人听。游泳是实践远大于理论的一项技能。只有理论站在岸上学一年、学十年也是掌握不了游泳技能的。最快的学习方式就是下水,在水里扑
分类:其他好文   时间:2020-12-16 12:11:40    阅读次数:3
ELK实战系列之一:ELK基础简介
一、ELK基础1、ELK简介ELK本质上是三个软件的组合,通过这三个软件的组合可以实现构建一个日志的收集、分析、展示的平台,也就是说借助于ELK可以实现把收集到的日志信息以饼图、柱形图、曲线图等直观的方式展示出来。ELK的三个组件如下:kibana:这个组件用来展示数据,用户访问的时候是访问kibanaelaticsearch简称es:用来存储数据的,kibana中所展示的数据都是来自于eslog
分类:其他好文   时间:2020-12-15 12:56:41    阅读次数:7
Elasticsearch 6.X 新类型Join深入详解
0、ES6.X一对多、多对多的数据该如何存储和实现呢?引出问题:“某头条新闻APP”新闻内容和新闻评论是1对多的关系?在ES6.X该如何存储、如何进行高效检索、聚合操作呢?相信阅读本文,你就能得到答案!1、ES6.X新类型Join产生背景Mysql中多表关联,我们可以通过leftjoin或者Join等实现;ES5.X版本,借助父子文档实现多表关联,类似数据库中Join的功能;实现的核心是借助于ES
分类:其他好文   时间:2020-12-15 12:30:07    阅读次数:2
Elasticsearch6.X 去重详解
1、题记Elasticsearch有没有类似mysql的distinct的去重功能呢?1)如何去重计数?类似mysql:selectdistinct(count(1))frommy_table;2)如何获取去重结果。类似mysql:SELECTDISTINCTname,ageFROMusers;2、需求1)对ES的检索结果进行去重统计计数。2)对ES的检索结果去重后显示。3、分析1)统计计数需要借
分类:其他好文   时间:2020-12-15 12:29:48    阅读次数:2
吃透 | Elasticsearch filter和query的不同
少啰嗦,直接看东西。——罗永浩1、query和filter的本质区别?以下几张图能更好的概括:query关注点:此文档与此查询子句的匹配程度如何?filter关注点:此文档和查询子句匹配吗?2、Query检索细化关注点1)是否包含?确定文档是否应该成为结果的一部分.2)相关度得分多少?除了确定文档是否匹配外,查询子句还计算了表示文档与其他文档相比匹配程度的_score。3)得分越高,相关度越高。更
分类:其他好文   时间:2020-12-15 12:29:26    阅读次数:3
探究 | Elasticsearch不支持事务有什么好的弥补方案吗?
1、问题源自星球同学的提问:es如何与hive或mysql结合使用?es不支持事务有什么好的弥补方案吗?2、事务的核心概念如果一个数据库声称支持事务的操作,那么该数据库必须要具备以下ACID四个特性:原子性(Atomicity)原子性是指事务包含的所有操作要么全部成功,要么全部失败回滚,一致性(Consistency)一致性是指事务必须使数据库从一个一致性状态变换到另一个一致性状态,也就是说一个事
分类:其他好文   时间:2020-12-15 12:29:15    阅读次数:3
干货 | Debezium实现Mysql到Elasticsearch高效实时同步
题记来自Elasticsearch中文社区的问题——MySQL中表无唯一递增字段,也无唯一递增时间字段,该怎么使用logstash实现MySQL实时增量导数据到es中?logstash和kafka_connector都仅支持基于自增id或者时间戳更新的方式增量同步数据。回到问题本身:如果库表里没有相关字段,该如何处理呢?本文给出相关探讨和解决方案。1、binlog认知1.1啥是binlog?bin
分类:数据库   时间:2020-12-15 12:28:58    阅读次数:5
实战 | canal 实现Mysql到Elasticsearch实时增量同步
题记关系型数据库Mysql/Oracle增量同步Elasticsearch是持续关注的问题,也是社区、QQ群等讨论最多的问题之一。问题包含但不限于:1、Mysql如何同步到Elasticsearch?2、Logstash、kafka_connector、canal选型有什么不同,如何取舍?3、能实现同步增删改查吗?.....本文给出答案。1、Canal同步1.1canal官方已支持Mysql同步E
分类:数据库   时间:2020-12-15 12:28:41    阅读次数:4
收集TCP/UDP日志
收集TCP/UDP日志 通过logstash的tcp/udp插件收集日志,通常用于在向elasticsearch日志补录丢失的部分日志,可以将丢失的日志通过一个TCP端口直接写入到elasticsearch服务器。 1.配置Logstash #进入Logstash配置文件目录 [root@redis ...
分类:其他好文   时间:2020-12-15 11:48:37    阅读次数:1
5309条   上一页 1 ... 12 13 14 15 16 ... 531 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!