从《Hadoop权威指南》选取了一个小案例，在Hadoop集群环境中运行。1、新建JAVA类，保存书中源代码。[huser@master bin]$ vi
URLCat.javaimport java.io.InputStream;import java.net.URL;import org.apa...
分类：
其他好文 时间：
2014-05-14 03:52:36
阅读次数：
457
linux高可用集群的种类很多，比如常见的heartbeat,corosync,rhcs,keepalived,这些集群软件的出现为我们的业务生产环境提供了高可用的保证，本文将简单介绍一下用heartbeat的v2版本来处理一个简单的http高可用集群的搭建。
在实现http高可用集群之前，首先至少需要2台主机，并且需要做3点基本的准备工作:
1.设置节点名称，并且集群...
分类：
系统相关 时间：
2014-05-13 23:11:46
阅读次数：
518
最近看着公司的项目是在太悲剧了看不下去了。各种供跨库调用各种卡，想换一种思路模式，找了很久感觉mongDB非关系型数据库比较合适也比较好玩。开始学习首先第一步
c# 链接mongDB集群
一 了解mongdb
一 学习部署
二 部署集群
三 C#链接mongdb 完成测试
mongdb 是作为非关系型数据库，数据存储在内存中，由于目前我我们公司全部采用sqlserve...
分类：
数据库 时间：
2014-05-13 08:46:05
阅读次数：
279
一个Hadoop集群拥有多个并行的计算机，用以存储和
Hadoop强调代码向数据迁移...
分类：
其他好文 时间：
2014-05-13 06:54:15
阅读次数：
366
超大规模数据中心TCO（总拥有成本）优化是另一个重要驱动因素。“横向扩展”的概念基本上是在一个集群中采用一系列统一的硬件元件，将应用负载分解成具有相同处理功能的子任务，然后在基础的硬件元件上执行这些功能。通过复制统一的硬件元素，即可为持续增加的应用负载如系统吞吐量、相关数据组大小等等几乎所有与基础设施资源扩展相关的方方面面提供支持。横向扩展的架构...
分类：
其他好文 时间：
2014-05-13 06:39:55
阅读次数：
365
环境说明
1、硬件说明
使用三台PC机，角色分配如下
2、软件说明
约定所有软件都放在/usr/local/路径下
准备工作
1、安装jdk
2、配置SSH
Storm集群安装
安装流程图
1、安装Zookeeper集群
2、安装Storm依赖
zeromq、jzmq、pytho...
分类：
其他好文 时间：
2014-05-13 05:44:31
阅读次数：
345
该博客的实验平台是：varemwork 9 +redhat enterprise 6
在没说配置之前首先要明确一点：由于是在虚拟机下进行linux的网络配置，所以，要涉及到Vmware网络设置和linux的网络设置
首先是：Vmware网络设置
VMWare提供了三种网络工作模式供用户选择，它们分别是：
1. bridged(桥接模式) 2. NAT(网络地...
分类：
系统相关 时间：
2014-05-12 23:50:10
阅读次数：
467
在我们选择硬件的时候，往往需要考虑应用得到的性能和经费开支。为此，我们必须在满足实际需要和经济可行上找到一个完美的平衡。下面，以Hadoop集群应用为了例子，说明需要考虑的要素。
1. I/O绑定的工作负荷。
Hadoop涉及到的I/O操作，主要包括下列几项：
索引（Indexing）
群化（Grouping）
数据导入和导出（Data importing...
分类：
其他好文 时间：
2014-05-12 23:47:04
阅读次数：
536
本文记录Ant编译MapReduce程序的过程。程序使用《Hadoop MapReduce
Cookbook》中的示例代码。1、安装AntAnt项目主页：http://ant.apache.org/下载二进制安装包，例如apache-ant-1.9.4-bin.tar.gz，上传到Hadoop集群环...
分类：
其他好文 时间：
2014-05-12 20:44:36
阅读次数：
398
接续接上篇缓存时代来临为蓝本,继续改造我们的百万级站点架构,这次我们拿之前存储静态内容的nfs开刀,众所周知nfs的多台集群节点下可能由于多重原因(磁盘io,网络带宽,并发场景),不适合做文件共享系统的基础结构.互联网站点中,存在大量图片或其他静态内容,并且这些内容一般在1M之..
分类：
其他好文 时间：
2014-05-11 19:16:07
阅读次数：
674
