1、增加hadoop账户su # 上述提到的以 root 用户登录useradd -m hadoop -s /bin/bash # 创建新用户hadooppasswd hadoop 输入 口令 hadoop为 hadoop 用户增加管理员权限 visudo找到以下文本处，增加 hadoop 权限## ...
分类：
其他好文 时间：
2019-11-29 00:39:07
阅读次数：
86
1.安装hadoop的hdfs伪分布式部署2.hadoop fs常规命令3.配置文件在官方哪里找 4.整理 jdk、ssh、hosts文件 1.安装hadoop的hdfs伪分布式部署 1.1 创建用户和目录 [root@aliyun ~]# useradd hadoop [root@aliyun ~ ...
分类：
其他好文 时间：
2019-11-28 13:20:10
阅读次数：
89
安装前 1，更新apt 会让你输入密码（自己登录Ubuntu的时候设置的），输入密码不会显示在终端面板上，确定自己敲对之后点回车就行。 2,安装SSH服务器 安装过程中有个Y/N? 选Y 如果出现 解决一： 解决二： 会出现类似这样结果 这时我们只需要杀死apt-get进程就好了(找不到还是用解决一 ...
分类：
其他好文 时间：
2019-11-02 11:54:04
阅读次数：
111
1、安装jdk 2、配置java环境变量 3、配置ssh免密钥登陆 4、解压hadoop安装包 5、配置hadoop环境变量 6、hadoop的java环境变量配置 7、配置core-site.xml 8、配置hdfs-site.xml 9、配置slaves文件 10、格式化hdfs 11、启动集群 ...
分类：
其他好文 时间：
2019-10-27 16:57:48
阅读次数：
94
本文是hadoop学习系列的第一篇文章本文将介绍Ubuntu环境下JDK的安装以及hadoop的安装阅读本文需要有一定Linux命令基础前期准备安装环境：ubuntu-16.04.3-desktop 64bit所需软件：jdk-8u161-linux-x64 hadoop-3.0.0JDK与hado... ...
分类：
系统相关 时间：
2019-10-11 10:45:04
阅读次数：
83
主要内容 Hadoop安装 前提 zookeeper正常使用 JAVA_HOME环境变量 安装包 "微云下载 | tar包目录下" Hadoop 2.7.7 角色划分 角色分配|NN|DN|SNN | | | cluster master|是|否|否 cluster slave1|否|是|是 clu ...
分类：
其他好文 时间：
2019-09-30 12:27:46
阅读次数：
97
1. 进入Hadoop环境(在Hadoop安装目录下运行命令、若配置好ssh则可以直接运行启动命令) 2. 启动hive进程（按照网上或林子雨的配置教程来就可以，不再赘述） 进入到shell 3.加载数据到hive数据库（在项目实操中不建议查询语句为select *，而应根据列名查询，若只是查看表结 ...
分类：
其他好文 时间：
2019-09-11 10:11:58
阅读次数：
79
centos7搭建伪分布式集群 需要 centos7虚拟机一台； jdk-linux安装包一个 hadoop-2.x安装包1个（推荐2.7.x） 一、设置虚拟机网络为静态IP（最好设成静态，为之后编程提供方便，不设置静态ip也可以） 1、进入网络配置查看ip 2、选择NAT模式链连接 3、点击NAT ...
分类：
其他好文 时间：
2019-09-02 22:11:13
阅读次数：
119
Debian系统配置 我这里在Vmware里面虚拟4个Debian系统，一个master，三个solver。hostname分别是 master、solver1、solver2、solver3 。对了，下面的JDK和hadoop安装配置操作都是使用 hadoop用户权限 来执行，并非root权限。 ...
分类：
其他好文 时间：
2019-08-25 21:40:52
阅读次数：
182
