目的: CentOS7 安装 Hadoop 伪分布式环境 组件版本信息: Hadoop: 2.7.7 Hbase: 1.4.8 zookeeper:3.4.7 资料下载: 资料包含:虚拟机安装包,CentOS7镜像,所需组件 链接:https://pan.baidu.com/s/1-Ye0vppf1 ...
分类:
其他好文 时间:
2019-10-25 13:12:04
阅读次数:
71
一、软硬件环境 CentOS 7.2 64位 OpenJDK-1.8.0 Hadoop-2.7 二、安装SSH客户端 安装ssh: yum install openssh-clients openssh-server安装完成后,使用以下命令测试: ssh localhost输入 root 账户的密码 ...
分类:
其他好文 时间:
2019-10-21 11:37:21
阅读次数:
96
Hadoop伪分布式集群搭建总结一、所需软件VMware15!CentOS6.5JDK1.8Hadoop2.7.3二、安装注意:对文件进行编辑:输入a,表示对该文件进行编辑,最后保存该文件,操作为:点击键盘上的Esc按钮,然后输入英文的:字符,再输入wq,点击回车,完成文件的保存。1、关闭防火墙和禁用SELINUX(1)、永久关闭防火墙,重启Linux系统(2)、禁用SELINUX:修改文件参数重
分类:
其他好文 时间:
2019-10-12 10:52:33
阅读次数:
260
Hadoop简介 Hadoop由Apache基金会开发的分布式系统基础架构,是利用集群对大量数据进行分布式处理和存储的软件框架。用户可以轻松地在Hadoop集群上开发和运行处理海量数据的应用程序。Hadoop有高可靠,高扩展,高效性,高容错等优点。Hadoop 框架最核心的设计就是HDFS和MapR ...
分类:
其他好文 时间:
2019-09-25 12:47:34
阅读次数:
126
原文链接:https://blog.csdn.net/xiaohuozi_2016/article/details/54743992 最近在自己装有win7系统的thinkpad电脑上,给安装了Ubuntu16.04双系统。 想在ubuntu下配置一个hadoop伪分布式,最首要的就是要给系统配置一 ...
分类:
系统相关 时间:
2019-08-14 12:27:11
阅读次数:
117
本周学习了-虚拟机和Unbuntu系统的安装,hadoop伪分布式安装,windows与ununtu系统通过File liza交互,HDFS与java,本地文件系统的交互 虚拟机 ubuntu系统 hadoop伪分布式安装成功 HDFS与java交互 ...
分类:
其他好文 时间:
2019-07-29 10:05:20
阅读次数:
102
修改hosts 创建用户 sudo授权 切换用户 下载解压 创建工作目录 添加环境变量 hadoop/ 修改配置文件 格式化hdfs 启动hdfs/ Yarn 查看启动状态 浏览器查看 [http://mo.don.com:9870]: [http://mo.don.com:8088]: ...
分类:
其他好文 时间:
2019-06-14 12:41:55
阅读次数:
88
1、传输jdk和Hadoop压缩包 2、解压jdk和hadoop压缩包 3、配置jdk环境和hadoop环境并生效 4、单机模式配置hadoop -env.sh:本地模式没有HDFS和Yarn,配置JDK后MapReduce能够运行java程序。 5、Hadoop伪分布式模式配置 一、5个配置文件 ...
分类:
其他好文 时间:
2019-05-26 17:51:23
阅读次数:
140
一、如何为虚拟机做快照? 1、什么是快照? 快照就是对当前的虚拟机状态进行拍照,保留虚拟机当前状态的操作信息。 2、为什么要为虚拟机做快照? 第一:为克隆不同状态的虚拟机提前做准备。 第二:当对虚拟机的某些操作执行错误而且改正比较麻烦的时候,可以切换到之前正常的虚拟机状态重新进行相关的操作。 3、如 ...
分类:
其他好文 时间:
2019-05-26 00:10:44
阅读次数:
140
下载 安装hadoop3.1.2http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-3.1.2/hadoop-3.1.2.tar.gz 注意:hadoop3.x的配置文件$HADOOP_HOME/etc/hadoop 伪分布式需要修改5个配置文件 ...
分类:
系统相关 时间:
2019-03-19 01:20:34
阅读次数:
425