Hadoop的运行模式有以下三种:
独立模式(standalone或local mode):无需任何守护进程(daemon),所有程序都在单个JVM上执行。主要用在开发阶段。默认属性就是为本模式所设,所以不需要额外的配置。
伪分布式模式(pseudo-distributed model):Hadoop守护进程运行在本地机器上,模拟一个小规模的集群。
全分布模式(full distributed model):Hadoop守护进程运...
分类:
其他好文 时间:
2014-10-13 12:15:19
阅读次数:
252
1.core-site.xml在中插入 fs.default.name hdfs://localhost:9000 dfs.replication 1 ...
分类:
其他好文 时间:
2014-10-12 13:51:37
阅读次数:
190
一、配置core-site.xml/usr/local/hadoop/etc/hadoop/core-site.xml 包含了hadoop启动时的配置信息。编辑器中打开此文件sudo gedit /usr/local/hadoop/etc/hadoop/core-site.xml在该文件的之间增加如...
分类:
系统相关 时间:
2014-10-11 12:10:55
阅读次数:
225
一、环境配置安装虚拟机vmware,并在该虚拟机机中安装CentOS 6.4; 修改hostname(修改配置文件/etc/sysconfig/network中的HOSTNAME=hadoop),修改IP到主机名的映射(vi /etc/hosts ,添加 127.0.0.1 hadoop); 按照J...
分类:
其他好文 时间:
2014-10-09 13:57:43
阅读次数:
189
前言: 毕业两年了,之前的工作一直没有接触过大数据的东西,对hadoop等比较陌生,所以最近开始学习了。对于我这样第一次学的人,过程还是充满了很多疑惑和不解的,不过我采取的策略是还是先让环境跑起来,然后在能用的基础上在多想想为什么。 通过这三个礼拜(基本上就是周六周日,其他时间都在加班啊T ...
分类:
其他好文 时间:
2014-10-09 13:05:13
阅读次数:
292
1.1 设置ip地址 执行命令 service network restart 验证 ifconfig1.2 关闭防火墙 执行命令 service iptables stop 验证 service iptables status1.3 关闭防火墙的自动运行(永久关闭) 执行命令 ...
分类:
其他好文 时间:
2014-10-09 02:57:57
阅读次数:
189
1、单机模式:安装简单,几乎不用作任何配置,但仅限于调试用途2、伪分布模式:在单节点上同时启动namenode、datanode、jobtracker、tasktracker、secondary namenode等5个进程,模拟分布式运行的各个节点 安装与配置步骤: 下载并解压Hadoo...
分类:
其他好文 时间:
2014-10-09 02:49:17
阅读次数:
246
本篇介绍两种HBase的安装方式:本地安装方式和伪分布式安装方式。
安装的前提条件是已经成功安装了hadoop,而且hadoop的版本要和hbase的版本相匹配。
我将要安装的hbase是hbase-0.94.11版本,需要的hadoop是hadoop-1.2.1版本。
hbase下载地址:http://mirror.bit.edu.cn/apache/hbase/hbase-0...
分类:
其他好文 时间:
2014-10-08 01:23:44
阅读次数:
279
cd/hoperunln-shadoop-0.20.2hadoopln-sjdk1.6.0_21jdkvi/hadoop/conf/hadoop-env.shexportJAVA_HOME=/hoperun/jdkvi/hadoop/conf/core-site.xml<property><name>fs.default.name</name><value>hdfs://localhost:9000</value></property>v..
分类:
其他好文 时间:
2014-10-06 23:42:03
阅读次数:
217
Hadoop-1.2.1伪分布下 hive-0.10.0内嵌模式安装1、下载hive-0.10.0 网址是:http://archive.apache.org/dist/hive/hive-0.10.0/ 下载的安装包为:hive-0.10.0.tar.gz 2012-12-18 23:21 35M...
分类:
其他好文 时间:
2014-10-03 09:37:54
阅读次数:
223