码迷,mamicode.com
首页 > 其他好文 > 详细

Hadoop HDFS源码分析 关于数据块的类

时间:2015-02-28 00:11:24      阅读:294      评论:0      收藏:0      [点我收藏+]

标签:

Hadoop HDFS源码分析 关于数据块的类

 

1.BlocksMap

官方代码中的注释为:

/**
 * This class maintains the map from a block to its metadata.
 * block‘s metadata currently includes blockCollection it belongs to and
 * the datanodes that store the block.
 */

  BlocksMap数据块映射,管理名字节点上的数据块的元数据。数据块的元数据包括数据块所属的INode和那些数据节点保存数据块等信息。也就是定位哪个数据块在哪个数据节点上。

技术分享

2.DatanodeDescriptor

DatanodeDescriptor数据节点描述符。官方解释为:

/**
 * This class extends the DatanodeInfo class with ephemeral information (eg
 * health, capacity, what blocks are associated with the Datanode) that is
 * private to the Namenode, ie this class is not exposed to clients.
 */

是名字节点中对数据节点的抽象,继承自DatanodeInfo。

技术分享

 

3.BlockInfo

BlockInfo 数据块信息,是Block的子类,它增加了数据块所属的INode信息和保存该数据块的数据节点信息。

/**
 * BlockInfo class maintains for a given block
 * the {@link INodeFile} it is part of and datanodes where the replicas of 
 * the block are stored.
 * BlockInfo class maintains for a given block
 * the {@link BlockCollection} it is part of and datanodes where the replicas of 
 * the block are stored.
 */

技术分享

数据块所在数据节点的信息保存在Object[] triplets。

Hadoop HDFS源码分析 关于数据块的类

标签:

原文地址:http://www.cnblogs.com/birdhack/p/4304510.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!