1.环境准备 jdk1.7.0_79 Hadoop2.7.2.(匹配Hbase1.2.2) zookeeer3.4.8 hbase 1.2.2 bin.tar.gz 最好和hadoop安装在统一用户下,解压安装包 2. 修改配置文件 .bashrc(多节点) source .bashrc使其生效 h ...
分类:
其他好文 时间:
2018-11-06 19:32:25
阅读次数:
272
下载hadoop macos下执行 下载是在太慢,所以直接从华为的镜像下载。 解压 ...
分类:
其他好文 时间:
2018-11-05 00:00:53
阅读次数:
160
hadoop2.0介绍 hadoop2.0 功能: HDFS:hadoop的分布式文件系统 运行架构:主从架构 主:namenode 一个 >管理 为解决单点故障添加助理 助理:secondarynamenode >帮助namenode备份数据 但是接替不了namenode的工作 从:datanod ...
分类:
其他好文 时间:
2018-09-28 12:37:29
阅读次数:
171
在Windows系统中开始安装VirtualBox虚拟机后,发现这个软件并不能打开,于是卸载重新安装了虚拟机VMware。 1.安装虚拟机VMware14 2.下载Ubuntu16.0.4 LTS 版本的镜像文件。 3.打开VMware软件,选择《创建虚拟机》;此处选择的是自定义。在网上找一个教程, ...
分类:
其他好文 时间:
2018-09-24 21:13:02
阅读次数:
141
主要步骤跟Hadoop1.0( "1.0安装地址" )一致,主要在配置这块有更改 安装 下载地址:http://archive.apache.org/dist/hadoop/core/hadoop 2.6.5/ hadoop安装目录创建./tmp目录,./dfs/name,./dfs/data 修改 ...
分类:
其他好文 时间:
2018-09-24 18:28:49
阅读次数:
170
此次来记录一下我在安装Hadoop安装过程中出现的错误,安装过程参照慕课网林子雨教程进行安装,在尝试过程中出现的错误如下: 1.在安装Ubuntu时,新建虚拟电脑时,并没有在版本的输入框中有Ubuntu(64bit)的显示,得在电脑图标出现之前,进入blos开启CPU的虚拟化,然后才能正常显示 2. ...
分类:
其他好文 时间:
2018-09-19 21:44:42
阅读次数:
165
## Hadoop常用操作 ### 1、Hadoop安装 略 ### 2、Hadoop配置 略 ### 3、Hadoop多目录配置 namenode和datanode节点下都可以进行多个目录的配置,但是意义不同。namenode的多目录配置是副本策略,保证数据可靠性,datanode多目录配置是对容... ...
分类:
其他好文 时间:
2018-09-16 15:57:20
阅读次数:
233
##前期工作 安装JDK 安装Hadoop 安装MySQL ##安装Hive ###下载Hive安装包 可以从 Apache 其中一个镜像站点中下载最新稳定版的 Hive, apache-hive-2.1.1-bin.tar.gz。 解压安装Hive 使用以下命令安装 Hive: sudo mv a ...
分类:
其他好文 时间:
2018-09-05 12:55:48
阅读次数:
212
上面的报错是在本地java调试(windows) hadoop集群 出现的 解决方案: 在resources文件夹下面创建一个文件log4j.properties(这个其实hadoop安装目录下的 etc/hadoop/log4j.properties 同名,我尝试拿过来用,发现还是不行报错信息如下 ...
分类:
移动开发 时间:
2018-09-04 19:08:14
阅读次数:
283
一.简述如何安装配置apache的一个开源的hadoop使用root账户登陆2.修改ip3.修改host主机名4.配置ssh免密登陆5.关闭防火墙6.安装JDK7.解压hadoop安装包8.配置hadoop的核心配置文件hadoop-env.sh?core-site.xml?mapred-site.xmlyarn-site.xmlhdfs-site.xml9.配置hadoop的环境变量10.格式化
分类:
其他好文 时间:
2018-08-28 19:00:26
阅读次数:
450