目的准备工作安装在非保护模式下运行Hadoop配置Hadoop的守护进程环境在非保护模式下配置Hadoop守护进程Hadoop的支架意识监视健康状态的节点管理器slaves文件日志操纵Hadoop集群启动Hadoop关闭Hadoopweb接口目的这篇文档描述了如何安装、配置和管理从几个节点到几千个节...
分类：
其他好文 时间：
2015-05-25 18:36:41
阅读次数：
179
1.准备去官网下载，http://hadoop.apache.org/然后官网是源码自己编译2.开始搭建干掉防火墙安装ssh安装jdk配置ssh无密码访问改hadoop配置文件测试hadoop wordcount干掉防火墙ubuntu系列ufw disableapt-get remove iptab...
分类：
其他好文 时间：
2015-05-23 14:10:25
阅读次数：
117
1、core-site.xml文件这是一个描述集群中NameNode结点的URI-统一资源标识符（包括协议，主机名称，端口号），集群里面的每一台机器都需要知道 NameNode的地址。DataNode结点会先在NameNode上注册，这样它们的数据才可以被利用。独立的客户端程序通过这个URI跟 Da...
分类：
其他好文 时间：
2015-05-19 00:32:41
阅读次数：
109
可配置性是一个好的应用程序的重要指标。我们常常需要实现类似能够运行时修改配置的功能。最近在开发一个中间层的服务程序，最终发布的方式是把代码打成jar包交给调用方使用。这个中间层服务需要一些配置信息，考虑了一下有几个基本的需求：
1. 在ja包中提供一个service-defalut.properties配置文件来提供全部的默认配置。这样的好处是尽量减少对调用方的侵入。调用方可以不提供额外的配置。...
分类：
其他好文 时间：
2015-05-08 22:15:36
阅读次数：
125
http://khangaonkar.blogspot.com/2012/09/hadoop-2x-tutorial.html1. hdfs-site.xmlnamenode and datanode folder need to create in advance, all the content...
分类：
其他好文 时间：
2015-04-29 07:04:02
阅读次数：
150
环境
系统：Ubuntu 14.04
hadoop版本：2.6.0
hbase版本：1.0
jdk版本：1.8
下载地址：Apache上慢慢找吧~~
jdk的环境配置这里就不列出来了，首先讲一下hadoop配置吧。
hadoop安装
1.安装位置：/opt
2.创建hadoop用户组
sudo addgroup hadoop
3.创建hadoop用户
sudo addu...
分类：
其他好文 时间：
2015-04-20 00:38:25
阅读次数：
199
#hadoop version 查看版本号1 、获取默认配置hadoop2系列配置文件一共包括6个，分别是hadoop-env.sh、core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml和slaves。除了hdfs-site.xml文件在...
分类：
其他好文 时间：
2015-03-31 17:28:40
阅读次数：
145
Hadoop配置主要事项
1、 保证Master和Slave能够ping通；
2、 配置/etc/hosts文件；
3、 能够ssh无密码切换各台主机；
4、 安装sun公司的jdk，在/etc/profile中设置好环境变量；
5、 下载Hadoop，安装、配置、搭建Hadoop集群；
1.Hadoop简介
Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。...
分类：
其他好文 时间：
2015-03-28 17:25:24
阅读次数：
173
1、dfs.hosts 记录即将作为datanode加入集群的机器列表 2、mapred.hosts 记录即将作为tasktracker加入集群的机器列表 3、dfs.hosts.exclude mapred.hosts.exclude 分别包含待移除的机器列表 4、master 记录运行辅...
分类：
其他好文 时间：
2015-03-21 17:17:02
阅读次数：
247
