Hadoop中只适用于Hbase分布式部署,hadoop的HA自动切换.概述: zookeeper是应用于分布式应用的,是一个分布式协调服务.实现分布式应用,同步,配置管理,分组还有命名服务的.实现分布式应用中的协调服务.侧重于高性能,高可靠,还有顺序访问,HDFS只做存储,出发点不一样,都...
分类:
其他好文 时间:
2015-11-26 06:52:25
阅读次数:
253
1、安装Ubuntu14.04 Desktop LTS下载ISO文件,ubuntu-14.04.1-desktop-amd64.iso。在VirtualBox或者VMware中新建虚拟机,将ISO文件设置为启动光盘。Windows 7下用VMware Workstation 10虚拟机安装 Ubun...
分类:
系统相关 时间:
2015-10-24 12:56:30
阅读次数:
318
1、安装Ubutun 14.04 Desktop LTS下载ISO文件,ubuntu-14.04.1-desktop-amd64.iso。在Virtualbox或者VmWare中新建虚拟机,将ISO文件设置为启动光盘。一路下一步,在需要输入用户的地方,输入用户名hduser,直到系统安装完成。重启虚...
分类:
其他好文 时间:
2015-09-09 16:22:54
阅读次数:
253
安装JDK 1.7+
【下载网址】http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html环境变量设置(最好不要采用openjdk):export JAVA_HOME=/usr/java/java-1.7.0_71
export JRE_HOME=$JAVA_HOME/jre
export...
分类:
其他好文 时间:
2015-08-26 22:42:31
阅读次数:
335
文章http://blog.csdn.net/lili72/article/details/41130743 lili72数据平台: 一、 hadoop平台:Hbase。hive,storm,spark 1) 部署hadoop到多台机器,调整配置參数,保证正常...
分类:
其他好文 时间:
2015-08-19 11:06:48
阅读次数:
141
第一步:安装JAVA 1.7 此步骤略过,太简单了,可参考这个: http://blog.sina.com.cn/s/blog_6a7cdcd40101b1j6.html 第二步:创建Haddop专用用户 虽然使用root用户也可以部署hadoop,但从系统安全及规范的角度考虑,还是建议大家创建专用...
分类:
其他好文 时间:
2015-07-12 23:01:42
阅读次数:
329
业务需求说明:公司在部署hadoop集群和DB server与SAN存储,公司的想法是前端通过DB Server能够将非结构化的数据能放进SAN存储当中,而hadoop集群也能够访问这个SAN存储。因此需要在SAN磁盘阵列中开辟一个共享区域,这个区域技能让DB server能够访问,也能够让hado...
Hadoop集群的部署网上很多关于hadoop集群部署的文章,我这里重新整理下,毕竟,别人的经历,让你按照着完整走下来,总有或多或少的问题。小技巧分享:有些初学者喜欢在自己机器上安装虚拟机来部署hadoop,毕竟,很多同学的学习环境都是比较受限的。我这里则直接选择了阿里云的机..
分类:
编程语言 时间:
2015-06-11 23:10:51
阅读次数:
548
1.Hadoop的3种运行模式单机模式:安装简单,几乎不用作任何配置,但仅限于调试用途伪分布模式:在单节点上同时启动namenode、datanode、jobtracker、tasktracker、secondarynamenode等5个进程,模拟分布式运行的各个节点完全分布式模式:正常的Hadoop集群,由多个各司其职的节..
分类:
其他好文 时间:
2015-05-09 20:36:04
阅读次数:
169