码迷,mamicode.com
首页 > 其他好文 > 详细

HDFS01

时间:2017-06-24 18:25:19      阅读:138      评论:0      收藏:0      [点我收藏+]

标签:datanode   命名空间   sim   元数据   文件的   二进制   md5   事务管理   组成   

技术分享

==============NameNode==============

管理文件系统的命名空间

记录每个文件数据在各个DataNode上的位置和副本信息

协调客户端对文件的访问

NameNode文件解析 ----->

VERSION 版本信息,文件系统标识符

seen_txid 事务管理用文件

 

fsimage_* 元数据文件

fsimage_*.md5 元数据文件

edits_* 元数据文件

==============DataNode==============

负责所在物理节点的存储管理

一次写入,多次读取(不修改)

文件由数据块组成,典型的块大小是64MB

数据块尽量散布到各个节点

DataNode文件解析 ----->

blk_<id>:HDFS的数据块,保存具体的二进制数据

blk_<id>.meta:数据块的属性信息:版本信息、类型信息

HDFS01

标签:datanode   命名空间   sim   元数据   文件的   二进制   md5   事务管理   组成   

原文地址:http://www.cnblogs.com/xtdxs/p/7073907.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!