码迷,mamicode.com
首页 > 其他好文 > 详细

Hadoop之 hdfs 系统

时间:2015-08-02 21:24:18      阅读:161      评论:0      收藏:0      [点我收藏+]

标签:

一、NameNode维护着2张表:

1.文件系统的目录结构,以及元数据信息

2.文件与数据块列表的对应关系

存放在fsimage中,在运行的时候加载到内存中的。

操作日志写到edits中

?

二、DataNode

使用block形式存储。在hadoop2中,默认的大小是128MB。

使用副本形式保存数据的安全,默认的数量是3个。

?

使用shell访问hdfs

bin/hdfs dfs –xxx

?

三、RPC(remote procedure call)

远程过程调用要有一个服务端(对外暴露方法供调用者使用),要有一个客户端(主动调用方法)。

Hadoop之 hdfs 系统

标签:

原文地址:http://www.cnblogs.com/chaoren399/p/4696631.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!