欢迎转载，转载请注明出处，徽沪一郎。概要Hadoop2中的Yarn是一个分布式计算资源的管理平台，由于其有极好的模型抽象，非常有可能成为分布式计算资源管理的事实标准。其主要职责将是分布式计算集群的管理，集群中计算资源的管理与分配。Yarn为应用程序开发提供了比较好的实现标准，Spark支持Yarn部...
分类：
其他好文 时间：
2014-07-07 14:18:32
阅读次数：
297
Spark是发源于美国加州大学伯克利分校AMPLab的集群计算平台，它立足于内存计算，性能超过Hadoop百倍，从多迭代批量处理出发，兼收并蓄数据仓库、流处理和图计算等多种计算范式，是罕见的全能选手。Spark采用一个统一的技术堆栈解决了云计算大数据的如流处理、图技术、机器学习、NoSQL查询...
分类：
其他好文 时间：
2014-07-03 10:19:26
阅读次数：
208
heartbeat+drbd+mysql是一种早期的mysql高可用技术。资料来源：http://www.drbd.orgDRBD原理:DRBD是对磁盘块操作的复制，可看做网络raid1。不复制磁盘内容，只复制操作。原理可见下图架构描述服务器列表 192.168.1.82192.168.1.1...
分类：
数据库 时间：
2014-07-03 00:37:22
阅读次数：
584
负载均衡是集群部署中的一种，通过多个节点来承担邮件服务的工作，每个获取Web页面的新请求都被动态路由到一个负载较低的节点上。即把负载压力根据某种算法合理分配到集群中的每一台计算机上，以减轻主服务器的压力，降低对主服务器的硬件和软件要求，适用于大容量用户使用。集群技术解析集群（Cluster）技术是指...
分类：
其他好文 时间：
2014-07-01 18:00:42
阅读次数：
267
NoSQL数据库：数据的一致性读取一致性强一致性 在任何时间访问集群中任一结点，得到的数据结果一致； 用户一致性 对同一用户，访问集群期间得到的数据一致； 解决用户一致性：使用粘性会话，将会话绑定到特定结点来处理； 这样会降低负载均衡器的性能； 最终一...
分类：
数据库 时间：
2014-07-01 10:26:14
阅读次数：
318
为了构建基于Yarn体系的Spark集群，先要安装Hadoop集群，为了以后查阅方便记录了我本次安装的具体步骤。...
分类：
其他好文 时间：
2014-07-01 08:17:24
阅读次数：
576
NoSQL数据库的分布式模型单一服务器在一个服务器完全能够胜任工作时就没必要考虑分布式，这样部署简单，维护也方便很多；分片特点数据的各个部分存放在集群的不同服务器中； 比如按字母来划分：以a-g开头的键值都存放到第一台服务器上，以h-n开头的存放到第二台...需要考虑的问题如何存放数据，让用户基本上...
分类：
数据库 时间：
2014-06-30 23:15:40
阅读次数：
327
在CentOS下安装Ngix服务及集群PHP、Tomcat
资源下载地址：http://download.csdn.net/detail/attagain/7570597
一、 Ngix依赖模块安装
Ngix依赖模块有：pcre、zlib、openssl、md5 /sha1（如果系统中没有安装相应模块，需要按照下列方式安装）
1、 安装pcre模块（8.35）
官方网站：http://w...
分类：
Web程序 时间：
2014-06-30 19:17:07
阅读次数：
294
一. 环境准备
1. 软件下载
a) apache_2.0.55-win32-x86-no_ssl.msi；
b) apache-tomcat-5.5.17.rar
c) mod_jk-apache-2.0.55.so...
分类：
其他好文 时间：
2014-06-30 17:45:46
阅读次数：
374
实验平台：CentOS6.4实现功能：利用corosync+pacemaker+drbd完成lamp平台的高可用，并安装Discuz论坛进行测试实验步骤：1、同步双方hosts文件，加入node6与node7的解析10.32.9.56node610.32.9.57node7实现SSH双机互信node1
ssh-keygen-trsa---生成一对公私钥文件，默认放在/roo..
分类：
其他好文 时间：
2014-06-29 21:40:53
阅读次数：
341
