前面介绍过hadoop的简单安装和FA安装,在这里将介绍几种hadoop2中HA(高可用性)安装,HA技术使hadoop不再存在单点namenode的故障。先来第一种:nfs+zookeeperHadoop
版本:2.2.0OS 版本: Centos6.4Jdk 版本: jdk1.6.0_32环境配...
分类:
其他好文 时间:
2014-05-17 03:07:21
阅读次数:
388
前面介绍过使用NFS+zookeeper来解决namenode单点失败问题,因为NFS可能也会存在单点问题,所以hadoop提供了一种叫做JournalNode技术,这项技术可以在JournalNode节点间共享数据我们来介绍这一种技术:JournalNode+
zookeeperHadoop 版本...
分类:
其他好文 时间:
2014-05-17 00:29:07
阅读次数:
331
挂载文件系统与卸载文件系统 mount / umount NO1. 挂载光驱
[root@rehat root]# mount -t iso9660 /dev/cdrom /mnt/cdrom NO2. 挂载光驱,支持中文
[root@rehat root]# mount -t iso9660 -o...
分类:
系统相关 时间:
2014-05-16 00:47:03
阅读次数:
407
环境:物理机,ubuntu12.04设备:mini2440开发板,USB转串口线一根,网线一根目标:物理主机开启nfs服务,在mini2440中能够成功挂载主机的共享目录一.安装并配置nfs服务1.使用命令安装: sudoapt-get
install nfs-kernel-server2. 使用命...
分类:
其他好文 时间:
2014-05-15 16:11:34
阅读次数:
431
一.NFSserver主要用户linux与unix间的文件共享服务器1.NFS又名网络文件协议:专门用来让linux或unix间进行文件共享2.NFS是基于RPC协议之一,由多个进程共同构成3.客户端与服务器端同时得使用Rpc协议4.RPC=>开启端口不固定,大于1024二.安装NFSServe1.首先需要安装RPC包一般..
分类:
其他好文 时间:
2014-05-15 12:36:26
阅读次数:
239
提示:该实验平台是在RedHatb6下进行的
配置成功的前提有三个:
(1):在window下能ping的通linux
(2):关闭linux 防火墙 执行指令:/etc/init.d/iptables stop
(3):使SElinux处于宽容模式 执行指令:setenforce permissive
一、配置tftp服务器步骤
(1):挂载磁盘,安装tptp-serv...
分类:
系统相关 时间:
2014-05-13 16:24:59
阅读次数:
409
kickstart自动化linux系统安装一、系统环境redhate6.3IP:10.240.240.210,Gateway:10.240.240.1二、使用yum方式安装软件包yuminstall-ytftp*xinetd"*dhcp*"nfs-utils-*三、配置dhcp服务器配置DHCP服务器的配置文件[root@localhosttftpboot]#vi/etc/dhcpd.conf#DHCPServerConfigu..
分类:
其他好文 时间:
2014-05-13 12:18:53
阅读次数:
375
NFS与PRCNFS就是(NetworkFileSystem的缩写,最初是由sum这家公司所发展起来的。它最大的功能就是可能通过网络,让不同的机器、不同的操作系统可以共享彼此的文件。NFS是通过网络来传输数据的,那么NFS使用哪个端口来进行数据传输呢?基本上NFS这个服务器的端口开在2049,但是..
分类:
其他好文 时间:
2014-05-13 03:29:06
阅读次数:
294
系统环境:rhel6在服务器端和客户端安装nfs服务,安装rpcbind支持nfs远程映射本地。同时设置开机自启动。[root@server~]#serviceiptablesstop[root@server~]#yum-yinstallnfs-utilsrpcbind[root@server~]#rpm-qanfs*nfs4-acl-tools-0.3.3-5.el6.i686nfs-utils-1.2.3-7.el6.i686..
分类:
其他好文 时间:
2014-05-12 03:20:21
阅读次数:
320
接续接上篇缓存时代来临为蓝本,继续改造我们的百万级站点架构,这次我们拿之前存储静态内容的nfs开刀,众所周知nfs的多台集群节点下可能由于多重原因(磁盘io,网络带宽,并发场景),不适合做文件共享系统的基础结构.互联网站点中,存在大量图片或其他静态内容,并且这些内容一般在1M之..
分类:
其他好文 时间:
2014-05-11 19:16:07
阅读次数:
674