目的这份文档描写叙述了怎样安装、配置和管理从几个节点到有数千个节点的Hadoop集群。玩的话，你可能想先在单机上安装。(看单节点配置)。准备从Apache镜像上下载一个Hadoop的稳定版本号。安装安装一个Hadoop集群，一般包含分发软件到全部集群中的机器上或者是安装RPMs。一般地，集群中的一台...
分类：
其他好文 时间：
2014-06-19 00:19:50
阅读次数：
372
.NET：巩固3.5特性MVC3框架 NHJ2EE：SSH,Srping MVC Maven myibatisDataBase:proc,trigger,index,SAP HANA,BIBook:Think Java, 中大十月会考Server:Linux-->apache-mysqlWin集群 ...
分类：
其他好文 时间：
2014-06-18 20:21:00
阅读次数：
219
Matlab R2013a Unix版下载地址注意：由于我是在单位的集群系统上装Matlab，没有root权限，故下载下来的.iso文件不能在linux下用mount命令挂载，故先在Win下解压，再将解压后的文件上传至服务器。由于没有root权限，所有需要安装的内容都装在自己的家目录下。另外，如果你...
分类：
系统相关 时间：
2014-06-18 20:10:12
阅读次数：
533
首先简单说说什么是集群技术。集群（cluster）技术是一种较新的技术,通过集群技术，可以在付出较低成本的情况下获得在性能、可靠性、灵活性方面的相对较高的收益，其任务调度则是集群系统中的核心技术。本文就集群系统的定义、发展趋势、任务调度等问题进行了简要论述。
分类：
其他好文 时间：
2014-06-18 16:36:46
阅读次数：
203
准备环境ApacheApache是http服务器，我们利用其对Tomcat进行负载均衡。目前最新版本为2.2.17，下载地址为http://httpd.apache.org/download.cgi#apache22。如下图：目前已经出现Apache2.3.11，但是为beta版本，所以没有使用。下...
分类：
其他好文 时间：
2014-06-18 16:34:09
阅读次数：
326
DataTorrent是一个实时的流式处理和分析平台，它每秒可以处理超过10亿个实时事件。与Twitter平均每秒大约6000条微博相比，最近发布的DataTorrent 1.0似乎已经超出了需求，它每秒可以处理超过10亿个实时事件。他们在一个包含37个节点的集群上进行了测试，每个节点256GB内存...
分类：
其他好文 时间：
2014-06-17 15:06:28
阅读次数：
193
五、搭建Hadoop集群上面的步骤，确认了单机可以执行Hadoop的伪分布执行，真正的分布式执行无非也就是多几台slave机器而已，配置方面的有一点点区别，配置起来就非常简单了。1、准备三台服务器192.168.56.101192.168.56.102192.168.56.103在每台机器的/etc/hosts中都将ip及hostname给映射上：192.168.56.101 nginx1192...
分类：
其他好文 时间：
2014-06-16 23:18:41
阅读次数：
499
Spark1.0.0可以通过以下几种方式来对Spark应用程序进行监控：
Spark应用程序的WebUI或者Spark Standalone的集群监控指标，然后通过支持指标收集的集群监控系统，如ganglia进行监控辅助监控工具
1：WebUI
Spark应用程序提交后，driver和Executor之间不断的交换运行信息，可以通过driver的4...
分类：
其他好文 时间：
2014-06-16 20:12:51
阅读次数：
325
记录使用RedHatClusterSuite实现高可用集群，利用web服务实验。实现RHCS的集群，有三个前提条件：①每个集群都有惟一集群名称；②至少有一个fence设备；③至少应该有三个节点；两个节点的场景中要使用qdisk（仲裁磁盘）；实验环境介绍：集群主机：192.168.1.6test1；192.168.1...
分类：
Web程序 时间：
2014-06-16 17:54:12
阅读次数：
616
前言：在很多场景中，服务的不间断及高可用性是非常重要的。不光要有负载均衡机制，虽然它在一定的场景中能实现一定的高可用性。（出门左转有过介绍）当其中的一台RealServer宕机后，客户多刷新几次页面，调度器还是能将请求转到其他的服务器上，不至于彻底挂掉。但是当调度器..
分类：
其他好文 时间：
2014-06-16 16:45:12
阅读次数：
230
