1. 修改主机名字 临时修改(session): sudo hostname orcll/etc/sysconfig/network -> HOSTNAME=hadoop0 #localhost.localdomain shutdown -r now 2.将hostname与ip绑定添加/etc/....
分类:
其他好文 时间:
2015-04-04 13:36:30
阅读次数:
127
现在我们将通过命令行与HDFS交互。HDFS还有很多其他接口,但命令行是最简单的,同时也是许多开发者最熟悉的。 在我们设置伪分布配置时,有两个属性需要进一步解释。首先是fs.default.name,设置为hdfs://localhos...
分类:
其他好文 时间:
2015-04-03 11:42:44
阅读次数:
148
现在我们将通过命令行与HDFS交互。HDFS还有很多其他接口,但命令行是最简单的,同时也是许多开发者最熟悉的。在我们设置伪分布配置时,有两个属性需要进一步解释。首先是fs.default.name,设置为hdfs://localhost/,用来为Hadoop设置默认文件系统。文件系统是由URI指定的,这里..
分类:
其他好文 时间:
2015-04-03 11:31:11
阅读次数:
170
现在我们将通过命令行与HDFS交互。HDFS还有很多其他接口,但命令行是最简单的,同时也是许多开发者最熟悉的。
在我们设置伪分布配置时,有两个属性需要进一步解释。首先是fs.default.name,设置为hdfs://localhost/,用来为Hadoop设置默认文件系统。文件系统是由URI指定的,这里我们已使用了一个hdfs URI 来配置HDFS为Hadoop的默认文件系统。HDFS的守...
分类:
其他好文 时间:
2015-04-03 11:18:47
阅读次数:
170
0、前言 3月31日是 Spark 五周年纪念日,从第一个公开发布的版本开始,Spark走过了不平凡的5年:从刚开始的默默无闻,到13年的鹊起,14年的大爆发。Spark核心之上有分布式的机器学习,SQL,streaming和图计算库。...
分类:
其他好文 时间:
2015-04-02 06:53:45
阅读次数:
273
Hadoop版本:2.6.0 虚拟机VMware11 操作系统ubuntu14.04-x64相关的教程可见http://blog.csdn.net/ggz631047367/article/details/42426391此处仅分享在配置过程中遇到的问题。问题1. 针对使用sudo su的问题 在....
分类:
其他好文 时间:
2015-03-30 21:04:37
阅读次数:
128
今天总算是把hadoop2.4的整个开发环境弄好了,包括 windows7上eclipse连接hadoop,eclipse的配置和測试弄得烦躁的一逗比了~先上一张成功的图片,hadoop的伪分布式安装配置,仅仅要依照步骤来,有点基础的 基本没什么问题的。。eclipse的配置 弄了非常长一段时间才弄...
分类:
其他好文 时间:
2015-03-29 19:17:35
阅读次数:
103
本文其实还算不上真正的启动代码解析,本文主要还是从启动流程上分析到startHMaster部分,初次之外本文将就HBase的伪分布式调试方式进行相关的介绍.
我们将源码倒入到Intellij IDE之后会得到如下的代码结构:
这里我们进入hbase-server中在src/main下面的resources中添加hadoop-metrics2-hbase.properties,hbase...
分类:
其他好文 时间:
2015-03-21 11:15:01
阅读次数:
237
1.首先安装好jdk并且配置好java的环境变量(具体方法可以在google中搜到)解压hadoop-0.20.2.tar.gz到你的ubuntu账户的目录中(/home/xxxx/hadoop)(解压到任何目录都可以吧,看个人需要,不过配置下面文件的时候一定要改成自己的路径)修改hadoop下的c...
分类:
系统相关 时间:
2015-03-21 09:42:53
阅读次数:
193
系统: Ubuntu 14.04 64bitHadoop版本: Hadoop 2.5.2 (stable)JDK版本: JDK 1.6
虚拟机及Ubuntu安装
1. 下载并安装 VMware workstation 11
下载地址:https://my.vmware.com/web/vmware/info/slug/desktop_end_user_computing/vmwar...
分类:
系统相关 时间:
2015-03-20 16:30:36
阅读次数:
429