hadoop-12-安装ambari-agent 在所有的机器上面安装ambari-agent 1, cd /etc/yum.repos.d/vi 三个文件vi ambari.repo#VERSION_NUMBER=2.5.0.3-7 [ambari-2.5.0.3] name=ambari Ver ...
分类:
其他好文 时间:
2017-11-02 14:34:47
阅读次数:
227
hadoop-03-安装java 1,su root 2, rpm -qa|grep jdk #查看已经安装的jdk 3,rpm -e --nodeps `rpm -qa|grep jdk ` #删除已经安装的jdk 4, rpm -ihv /software/jdk-8u121-linux-x64 ...
分类:
编程语言 时间:
2017-11-01 14:55:29
阅读次数:
140
环境是ubuntu java啥的有yum apt-get install default-jdk update-alternatives --display Java hadoop解压缩就行 tar -zxvf xxxx.tar.gz hadoop需要ssh密钥 ssh-keygen -t dsa ...
分类:
其他好文 时间:
2017-10-23 21:49:55
阅读次数:
221
安装centos7 请参考 :centos7 安装 新增hadoop用户 A.添加用户 Hadoop 执行命令:useradd hadoop B. 设置用户密码 执行命令:passwd Hadoop 设置密码。 C. 给该用户赋予sudo命令权限 执行命令:chmod u+w /etc/sudoer ...
分类:
其他好文 时间:
2017-10-23 00:56:31
阅读次数:
321
单词计数是最简单也是最能体现MapReduce思想的程序之一,可以称为MapReduce版"Hello World",该程序的完整代码可以在Hadoop安装包的"src/examples"目录下找到。单词计数主要完成功能是:统计一系列文本文件中每个单词出现的次数 程序的功能:假设现在有n个文本,Wo ...
分类:
其他好文 时间:
2017-09-30 10:12:56
阅读次数:
172
目的 这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和Map-Reduce框架有所体会,比如在HDFS上运行示例程序或简单作业等。 这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和 ...
分类:
其他好文 时间:
2017-09-26 13:36:56
阅读次数:
182
hadoop版本:2.7.4 java版本:1.8.0 os: ubuntu16.04 server 安装: 1.安装java。 2.下载haddop-2.7.4-bin.tar.gz, 解压,如图 hadoop的配置文件位于 hadoop安装目录下的 etc/hadoop下 通用配置 1.JAVA ...
分类:
其他好文 时间:
2017-09-15 18:39:45
阅读次数:
136
环境:CentOS 7.3 64位(64位的hadoop需要自己编译) 1、创建新用户 useradd -m hadoop -s /bin/bash 创建hadoop用户并使用/bin/bash作为shell passwd hadoop 给hadoop用户设置密码 visudo 给hadoop用户增 ...
分类:
其他好文 时间:
2017-09-11 19:45:17
阅读次数:
297
这里为了方便直接将单机部署过的虚拟机直接克隆,当然也可以不这样做,一个个手工部署。 创建完整克隆——>下一步——>安装位置。等待一段时间即可。 我这边用了三台虚拟机,分别起名master,slave1.slave2 1、修改主机名、ip 1.1关闭防火墙 CentOS系统默认开启了防火墙,在开启 H ...
分类:
其他好文 时间:
2017-09-07 19:40:39
阅读次数:
283
1. install jdk 2. install hadoop. 安装包hadoop-2.2.0.tar.gz存放在一个目录。并解压。 3. 修改配置文件,一般配置文件在/etc/hadoop下面。 (1) hadoop-env.sh修改配置文件: export JAVA_HOME=/home/j ...
分类:
其他好文 时间:
2017-09-04 14:54:14
阅读次数:
141