通过对Hadoop分布式计算平台最核心的分布式文件系统HDFS、MapReduce处理过程,以及数据仓库工具Hive和分布式数据库Hbase的介绍,基本涵盖了Hadoop分布式平台的所有技术核心。
HDFS的体系架构
整个Hadoop的体系结构主要是通过HDFS来实现对分布式存储的底层支持,并通过MR来实现对分布式并行任务处理的程序支持。
HDFS采用主从(Maste...
分类:
其他好文 时间:
2015-08-12 19:36:08
阅读次数:
110
Amoeba for MySQL致力于MySQL的分布式数据库前端代理层,它主要在应用层访问MySQL的时候充当query 路由功能,专注 分布式数据库 proxy 开发。座落与Client、DB Server(s)之间。对客户端透明。具有负载均衡、高可用...
分类:
数据库 时间:
2015-08-10 00:36:33
阅读次数:
152
分布式算是软件界发展的一个里程碑,它开辟一个新的软件时代,其他的溢美之词我就不再乱说了。
分布式按照我的观点,应该分为有状态和无状态2种:
有状态
分布式数据库分布式存储
无状态
分布式计算分布式web系统
当然分布式尽量做成无状态的分布式,但是存储最终因为最终存储的是有状态的数据,所以不得不变的有状态。当然web系统也可以是有状态的,但是最好做成无状态的,因为...
分类:
其他好文 时间:
2015-08-08 10:32:22
阅读次数:
112
运行环境: 主机1:Ubuntu14.04 Desktop + MySQL5.5 + JDK 1.7(HP Z400) ?内网IP地址:192.168.137.8 NODE1:Ubuntu 13.04 server + MySQL5.5 ?内网IP地址:192.168.137.31 NODE2:Ubuntu 13.04 server + MySQL5....
分类:
数据库 时间:
2015-08-07 16:41:22
阅读次数:
253
一、Amoeba是什么Amoeba(变形虫)项目,专注分布式数据库proxy开发。座落与Client、DBServer(s)之间。对客户端透明。具有负载均衡、高可用性、sql过滤、读写分离、可路由相关的query到目标数据库、可并发请求多台数据库合并结果。主要解决:降低数据切分带来的复杂多数据库结构..
分类:
数据库 时间:
2015-08-06 18:45:15
阅读次数:
511
HBase 1.1.1 发布下载:
hbase-1.1.1-bin.tar.gz
hbase-1.1.1-bin.tar.gz.mds
hbase-1.1.1-src.tar.gz
hbase-1.1.1-src.tar.gz.mds
更新内容如下:
** 子任务
* [HBASE-13470] - High level Int...
分类:
数据库 时间:
2015-08-04 13:39:02
阅读次数:
287
简介:DNS(DomainNameSystem,域名系统),因特网上作为域名和IP地址相互映射的一个分布式数据库,能够使用户更方便的访问互联网,而不用去记住能够被机器直接读取的IP数串。通过主机名,最终得到该主机名对应的IP地址的过程叫做域名解析(或主机名解析)。DNS协议运行在TCP与..
分类:
其他好文 时间:
2015-07-25 07:14:01
阅读次数:
150
一、NoSQL基础知识
1.关于NoSQL
在“NoSQL”一词,实际上是一个叫Racker的同事创造的,当约翰埃文斯埃里克要组织一次活动来讨论开源的分布式数据库。这个名称和概念都由此而来。
有些人反对NoSQL术语,因为它听起来像我们定义自己是什么.在一定程度,但长期仍然是有价值的,因为当一个关系数据库是唯一的工具,你知道,每一个问题,看起来像一个大拇指。 NoSQL是让人们知...
分类:
数据库 时间:
2015-07-25 00:21:15
阅读次数:
200
因为之前做的drbd+mysql+Heartbeat。感觉高可用做的不够彻底。就了解下Amoeba。文档地址:http://docs.hexnova.com/amoeba/index.html下载:http://sourceforge.net/projects/amoeba/files/Amoeba功能:代理。AmoebaforMySQL致力于MySQL的分布式数据库前端代理层,它主要在应用..
分类:
数据库 时间:
2015-07-24 18:52:17
阅读次数:
178