准备: 两台配置CentOS 7.3的阿里云ECS服务器; hadoop-2.7.3.tar.gz安装包; jdk-8u77-linux-x64.tar.gz安装包; hostname及IP的配置: 更改主机名: 由于系统为CentOS 7,可以直接使用‘hostnamectl set-hostna ...
分类:
其他好文 时间:
2019-11-23 13:12:49
阅读次数:
108
本篇将在阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建的基础上搭建,多添加了一个 datanode 节点 。 1 节点环境介绍: 1.1 环境介绍: 服务器:三台阿里云ECS服务器:master, slave1, slave2 操作系统:CentOS 7.3 Had ...
分类:
其他好文 时间:
2019-11-23 13:10:47
阅读次数:
98
本篇将在阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建的基础上搭建,多添加了一个 datanode 节点 。 1 节点环境介绍: 1.1 环境介绍: 服务器:三台阿里云ECS服务器:master, slave1, slave2 操作系统:CentOS 7.3 Had ...
分类:
其他好文 时间:
2019-11-23 13:04:25
阅读次数:
81
本篇将在 阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建 阿里云ECS服务器部署HADOOP集群(二):HBase完全分布式集群搭建(使用外置ZooKeeper) 阿里云ECS服务器部署HADOOP集群(三):ZooKeeper 完全分布式集群搭建 阿里云ECS服务 ...
分类:
其他好文 时间:
2019-11-23 12:54:33
阅读次数:
80
本篇将在阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建的基础上搭建。 1 环境介绍 一台阿里云ECS服务器:master 操作系统:CentOS 7.3 Hadoop:hadoop-2.7.3.tar.gz Java: jdk-8u77-linux-x64.tar. ...
分类:
Web程序 时间:
2019-11-23 12:53:35
阅读次数:
85
本篇将在阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建的基础上搭建。 本地模式需要采用MySQL数据库存储数据。 1 环境介绍 一台阿里云ECS服务器:master 操作系统:CentOS 7.3 Hadoop:hadoop-2.7.3.tar.gz Java: j ...
分类:
其他好文 时间:
2019-11-23 12:49:25
阅读次数:
82
本篇将在阿里云ECS服务器部署HADOOP集群(一):Hadoop完全分布式集群环境搭建的基础上搭建。 1 环境介绍 一台阿里云ECS服务器:master 操作系统:CentOS 7.3 Hadoop:hadoop-2.7.3.tar.gz Java: jdk-8u77-linux-x64.tar. ...
分类:
其他好文 时间:
2019-11-23 12:20:19
阅读次数:
98
本人在搭建完全分布式时, 启动start-all.sh时: 出现了slave1:mkdir :无法创建目录"/opt/apps/hadoop/logs":权限不够 slave2:mkdir:无法创建目录"/opt/apps/hadoop/logs":权限不够 顾名思义肯定是slave1,和slave ...
分类:
移动开发 时间:
2019-11-08 20:52:41
阅读次数:
375
1. 前置条件: 之前已经搭好了带有HDFS, MapReduce,Yarn 的 Hadoop 集群 链接: ubuntu18.04.2 hadoop3.1.2+zookeeper3.5.5高可用完全分布式集群搭建 2. 上传tar包并修改配置文件 解压tar包到指定目录 进入配置目录 vim hb ...
分类:
系统相关 时间:
2019-11-03 16:26:41
阅读次数:
91
前述:这篇文档是建立在三台虚拟机相互ping通,防火墙关闭,hosts文件修改,SSH 免密码登录,主机名修改等的基础上开始的。 一.传入文件 1.创建安装目录 mkdir /usr/local/soft 2.打开xftp,找到对应目录,将所需安装包传入进去 查看安装包:cd /usr/local/ ...
分类:
其他好文 时间:
2019-11-02 18:07:15
阅读次数:
78