声明：1）本文由我bitpeach原创撰写，转载时请注明出处，侵权必究。
2）本小实验工作环境为Ubuntu操作系统，hadoop1-2-1，jdk1.8.0。
3）统计词频工作在单节点的伪分布上，至于真正实际集群的配置操作还没有达到，希望能够由本文抛砖引玉。（一）Hadoop的配置修正 网上有很多...
分类：
其他好文 时间：
2014-05-05 21:54:47
阅读次数：
456
在Hadoop集群环境下安装Mahout。环境：OS：Centos 6.5 x64 &
Soft：Hadoop 1.2.1 & Mahout
0.91、简介mahout项目主页：https://mahout.apache.org/下载二进制包，上传到服务器。2、安装用集群环境用户安装，解压二进制包。...
分类：
其他好文 时间：
2014-05-05 21:35:23
阅读次数：
429
前两天将Hadoop2的完全分布式搭建文档整理发布于网上（http://blog.csdn.net/aaronhadoop/article/details/24859369），朋友相邀，就再将Hadoop2的伪分布式文档整理一下，搭建过Hadoop2完全分布式后，就笑对“伪分布式”说声
呵呵吧。
前期的jdk环境、SSH免密钥登录配置在此就不再赘述了，直接进入hadoop2的配...
分类：
其他好文 时间：
2014-05-03 21:51:45
阅读次数：
344
一、概述：
Yarn调度器有许多实现，如Fifo, Capacity和Fair schedulers等。与其同时，正在进行一些优化措施来提高调度器在不同负载和工作场景下的性能。每个调度器都有自己的特性，调度决策受许多因素影响，如公平行、计算能力保证和资源的可靠性等。在部署一个调度算法到生产集群之前，评估一个调度算法是非常重要的，不幸的是，评估一个调度算法是不那么容易的，评估一个真正的集群是非常耗...
分类：
其他好文 时间：
2014-05-03 21:00:00
阅读次数：
443
2014年5月1日是劳动节，是劳动人民应该休息的节日，呵呵结果这几天却是作死的节奏，天天加班到2点半，真实很辛苦呀，整个过程很艰辛但是结果是好的。1、配置LC1600链路负载均衡，首先要激活license的。在system-license-Reactivacte2、要创建VLAN，由于是联通线路、电信线路和..
分类：
其他好文 时间：
2014-05-03 20:45:55
阅读次数：
322
LVS-NAT是通过改变数据包中的目的IP地址,来实现调度的.拓扑图：说明:Director是调度服务器、RealN为真实服务器(这里用四台).实验用vmware虚拟机和小凡模拟器来完成,为了保证物理上确实是隔离开的,需要不同的vmnet网卡相连.lClient与路由器之间用vmnet1连接;l路由器与Director之..
分类：
其他好文 时间：
2014-05-03 20:43:31
阅读次数：
551
在配置集群时，每个节点上有很多相同的配置，如启动服务相同、安装程序、提供相同的配置文件，甚至定制相同的任务计划来定期执行某些操作等。如果你管理的只是三两个节点配置起来还是相当简单的，但是有三五十台，甚至上百台你还要自已一个一个手动来配置，那就太痛苦了。因些..
分类：
其他好文 时间：
2014-05-03 20:42:02
阅读次数：
572
LVS-NAT模型：工作原理：将内部地址转化为Internets上可用的外部地址。NAT的工作原理是报文头（目标地址、源地址和端口等）被正确改写后，客户相信它们连接一个IP地址，而不同IP地址的服务器组也认为它们是与客户直接相连的。由此，可以用NAT方法将不同IP地址的并行网络服务变..
分类：
其他好文 时间：
2014-05-03 20:35:15
阅读次数：
409
一、实验拓扑图；keepalived；keepalived的主要目的是为ipvs提供高可用性，因此keepalived除了能够实现资源转移之外，自身能够调用ipvsadm命令来生成规则，而且还能够检测后端Rserver服务的健康状态检测。keepalived自身就是一个服务，启动之后工作在两个节点上(可以是多个节点..
分类：
Web程序 时间：
2014-05-03 20:32:43
阅读次数：
611
一、简介HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代理，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。HAProxy运行在时下的硬件上，完全可以支持数以万计的并发连接。并..
分类：
其他好文 时间：
2014-05-03 15:01:41
阅读次数：
430
