摘要： 背景 Greenplum是一个MPP的数据仓库系统，最大的优点是水平扩展，并且一个QUERY就能将硬件资源的能力发挥到极致。 但这也是被一些用户诟病的一点，因为一个的QUERY就可能占光所有的硬件资源，所以并发一多的话，query相互之间的资源争抢就比较严重。 Greenplum资源隔 背景 ...
分类：
其他好文 时间：
2017-03-27 17:09:43
阅读次数：
366
《实时分析系统(HIVE/HBASE/IMPALA)浅析》《MPP DB 是 大数据实时分析系统 未来的选择吗？》《一套数据，多种引擎（impala/Hive/kylin）》《一套数据，多种引擎续 两种数据格式（Parquet/ORCfile）浅析》有兴趣可以看看。 ...
分类：
其他好文 时间：
2017-03-01 18:13:03
阅读次数：
173
12 月 9 日，阿里云宣布数据库产品 HybridDB 正式商业化。 HybridDB（ApsaraDB HybridDB）是一款在线 MPP 大规模并行处理数据仓库的服务。它基于 Pivotal 公司的开源数据库项目 Greenplum Database 开发，并由阿里云数据库团队在云计算架构下 ...
分类：
数据库 时间：
2017-03-01 12:03:59
阅读次数：
257
SMP和NUMA根据CPU访问内存中地址所需时间和距离我们可以将CPU和内存结构分为SMP（SMP，SymmetricMulti-Processor，也称之为一致内存访问UMA）、NUMA和MPP(MassiveParallelProcessing)三种结构。而我们在虚拟化环境中常用的结构包括SMP和NUMA这两种。相对SMP(UMA）来说，NUMA具..
分类：
其他好文 时间：
2017-02-17 15:41:14
阅读次数：
125
下面给大家介绍怎么理解impala，impala工作原理是什么。 Impala是hadoop上交互式MPP SQL引擎， 也是目前性能最好的开源SQL-on-hadoop方案。 如下图所示， impala性能超过SparkSQL、 Presto、 Hive。 impala与hadoop生态结合紧密 ...
分类：
其他好文 时间：
2017-02-12 11:03:07
阅读次数：
3110
为什么之前的MapReduce系统比较慢 常理上有几个理由使得MapReduce框架慢于MPP数据库： 容错所引入的昂贵数据实体化(data materialization)开销。 孱弱的数据布局(data layout)，比如缺少索引。 执行策略的开销[1 2]。 而我们对于Hive的实验也进一步... ...
分类：
其他好文 时间：
2017-01-17 12:32:36
阅读次数：
170
分布式系统实践 1. 大数据时代快速SQL引擎-Impala http://dwz.cn/4G9mvt 摘要: 在Dremel论文发表之后，开源社区涌现出了一批基于MPP架构的SQL-on-Hadoop(HDFS)查询引擎，典型代表有Apache Impala、Presto、Apache Drill ...
分类：
其他好文 时间：
2016-11-26 11:23:53
阅读次数：
245
计算机体系的划分 1.按处理机个数和种类划分 按处理机个数和种类，计算机体系可分为单处理机、多处理机、并行处理机、关联处理机、超标量处理机、超流水线处理机、SMP(对称多处理机)、MPP(大规模并行处理机)、机群系统等。 2.Flynn分类法 按照指令流和数据流的不同组织方式，可将计算机系统结构分为 ...
分类：
其他好文 时间：
2016-10-12 08:54:41
阅读次数：
179
微软的Azure Data Warehouse是基于MPP架构的分布式系统： Control Node负责管理系统和接受用户的请求，Compute Node负责计算。 目前在国内Azure Data Warehouse已经落地了。可以使用新的Portal页面进行管理，也可以使用PowerShell进 ...
分类：
系统相关 时间：
2016-10-06 00:31:02
阅读次数：
278
简介： GreenPlum是一个基于PostgreSQL数据库开发的MPP架构的数据库仓库，适用于OLAP系统，支持50PB(1PB=1000TB)级海量数据的存储和处理。 背景： 目前有一个业务是需要将Oracle数据库中的基础数据增量同步到GreenPlum数据仓库，便于进行数据分析和处理。 规 ...
分类：
数据库 时间：
2016-09-21 13:04:36
阅读次数：
607
