Understanding Cubert Concepts（二）：Cubert Co-Partitioned Blocks话接上文Cubert PartitionedBlocks，我们介绍了Cubert的核心Block概念之一的分区块，它是一种根据partitionKeys和cost function来对原始数据进行Redistribution和Transformation来结构化数据，这种结构化的...
分类：
其他好文 时间：
2015-07-01 12:18:05
阅读次数：
140
LinkedIn Cubert安装指南
Understanding Cubert Concepts（一）Partitioned Blocks
Understanding Cubert Concepts（二）Co-Partitioned Blocks...
分类：
其他好文 时间：
2015-07-01 12:15:40
阅读次数：
143
Understanding Cubert Concepts：Cubert Concepts对于Cubert，我们要理解其核心的一些概念，比如BLOCK。这些概念也是区别于传统的关系型范式（Pig，Hive）等数据处理流程并使得Cubert在大规模数据下JOIN和Aggregation中取胜的关键因素。（自己测下来，CUBE的计算效率比Hive高好多倍。）BLOCKCubert定义了一个BLOCK的概...
分类：
其他好文 时间：
2015-06-29 20:24:58
阅读次数：
116
最近工作需要，调研了一下LinkedIn开源的用于复杂大数据分析的高性能计算引擎Cubert。自己测了下，感觉比较适合做报表统计中的Cube计算和Join计算，效率往往比Hive高很多倍，节省资源和时间。下面看下这个框架的介绍：
Cubert完全用Java开发，并提供一种脚本语言。它是针对报表领域里经常出现的复杂连接和聚合而设计的。Cubert使用MeshJoin算法处理大时间窗口下的大数据集，...
分类：
其他好文 时间：
2015-06-18 13:41:54
阅读次数：
253
近日，Linkedin宣布开源其正在使用的大数据计算引擎Cubert，该框架提供了一种新的数据模型来组织数据，并使用诸如MeshJoin 和Cube算法等算法来对组织后的数据进行计算，从而减轻了系统负荷和节省了CPU资源，最终提供给用户一个简单、高效的查询。Cubert比较适合的计 算领域包括统计计...
分类：
其他好文 时间：
2014-11-19 18:17:29
阅读次数：
187
