码迷,mamicode.com
首页 > 其他好文 > 详细

Hadoop 组成

时间:2014-05-07 04:33:35      阅读:359      评论:0      收藏:0      [点我收藏+]

标签:hadoop   组成   结构   

这里介绍一下hadoop的组成, hadoop主要由两部分组成,,一个是hdfs,另一个是mapreduce

这两个部分在hadoop 2.2.0中分别用start-dfs.sh和start-yarn.sh启动。mapreduce 在2.0版本中有了一个新名字yarn.

dfs 主要用来启动 namenode 和 datanode, namenode既是是传说中的matser, datanode 是传说中的slave。

yarn 主要用来启动resourcemanager 和nodemanager。resourcemanager也被称为jobtracker,nodemanger也被称为tasktracker.

下图是yarn的组成结构图。详细介绍请看

http://hadoop.apache.org/docs/r2.3.0/hadoop-yarn/hadoop-yarn-site/YARN.html

bubuko.com,布布扣

 


reference:http://hadoop.apache.org/docs/r2.3.0/hadoop-yarn/hadoop-yarn-site/YARN.html


Hadoop 组成,布布扣,bubuko.com

Hadoop 组成

标签:hadoop   组成   结构   

原文地址:http://blog.csdn.net/robinsonmhj/article/details/25013059

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!