码迷,mamicode.com
首页 >  
搜索关键字:kudu    ( 65个结果
【大数据之数据仓库】kudu性能测试报告分析
本文由 网易云 发布。 这篇博文主要的内容不是分析说明kudu的性能指标情况,而是分析为什么kudu的scan性能会这么龊!当初对外宣传可是加了各种 逆天黑科技的呀:列独立存储、bloom filter、压缩、原地修改、b+tree、mvcc ... ... 这里先贴个kudu和parquet小部分 ...
分类:其他好文   时间:2018-04-23 13:51:26    阅读次数:485
kudu系列: Java API使用和效率测试
Kudu+Impala很适合数据分析, 但直接使用Insert values语句往Kudu表插入数据, 效率实在不好, 测试下来insert的速度仅为80笔/秒. 原因也是显然的, Kudu本身写入效率很高, 但是Impala并没有做这方面优化, 观察下来每次Impala语句执行的overhead都 ...
分类:编程语言   时间:2018-04-05 01:27:39    阅读次数:5155
hadoop+spark+kudu
1.spark 和kudu 的兼容版本 spark 2.2 需要 kudu 1.5.0 ...
分类:其他好文   时间:2018-04-04 18:16:35    阅读次数:213
Kudu,支持快速分析的新型Hadoop存储系统
Kudu是Cloudera开源的新型列式存储系统,是Apache Hadoop生态圈的新成员之一(incubating),专门为了对快速变化的数据进行快速的分析,填补了以往Hadoop存储层的空缺。本文主要对Kudu的动机、背景,以及架构进行简单介绍。 背景——功能上的空白 Hadoop生态系统有很 ...
分类:其他好文   时间:2018-02-11 12:31:56    阅读次数:168
Kudu,支持快速分析的新型Hadoop存储系统
Kudu,支持快速分析的新型Hadoop存储系统:https://www.cnblogs.com/wuxian11/p/6478581.html ...
分类:其他好文   时间:2018-02-08 15:35:20    阅读次数:134
Hadoop/Spark生态圈里的新气象
令人惊讶的是,Hadoop在短短一年的时间里被重新定义。让我们看看这个火爆生态圈的所有主要部分,以及它们各自具有的意义。 对于Hadoop你需要了解的最重要的事情就是 ,它不再是原来的Hadoop。 这边厢,Cloudera有时换掉HDFS改用Kudu,同时宣布Spark是其圈子的核心(因而一概取代 ...
分类:其他好文   时间:2017-09-21 18:05:27    阅读次数:172
分布式技术追踪 2017年第三十三期
分布式系统实践 1. 生活中的Paxos,原来你我都在使用——对Paxos生活化的解读 http://hedengcheng.com/?p=970 摘要: 很通俗的介绍Paxos的文章, 推荐大家看看. 2. 一文读懂Apache Kudu http://dwz.cn/6o5asK 摘要: 关于Ku ...
分类:其他好文   时间:2017-08-18 19:55:56    阅读次数:168
Apache Kudu
Apache Kudu是由Cloudera开源的存储引擎,可以同时提供低延迟的随机读写和高效的数据分析能力。Kudu支持水平扩展,使用Raft协议进行一致性保证,并且与Cloudera Impala和Apache Spark等当前流行的大数据查询和分析工具结 合紧密。本文将为您介绍Kudu的一些基本 ...
分类:Web程序   时间:2017-08-18 14:27:26    阅读次数:269
Spark Kudu 结合
Kudu的背景 Hadoop中有很多组件,为了实现复杂的功能通常都是使用混合架构, Hbase:实现快速插入和修改,对大量的小规模查询也很迅速 HDFS/Parquet + Impala/Hive:对超大的数据集进行查询分析,对于这类场景, Parquet这种列式存储文件格式具有极大的优势。 HDF ...
分类:其他好文   时间:2017-07-20 17:29:13    阅读次数:381
比较Apache Hadoop生态系统中不同的文件格式和存储引擎的性能
这篇文章提出了在Apache Hadoop生态系统中对比一些当前流行的数据格式和可用的存储引擎的性能:Apache Avro,Apache Parquet,Apache HBase和Apache Kudu空间效率,提取性能,分析扫描以及随机数据查找等领域。这有助于理解它们中的每一个如何(何时)改善你 ...
分类:Web程序   时间:2017-06-04 00:13:14    阅读次数:385
65条   上一页 1 ... 3 4 5 6 7 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!