码迷,mamicode.com
首页 > 其他好文 > 详细

大数据入门第六天——HDFS详解

时间:2018-01-29 16:11:23      阅读:164      评论:0      收藏:0      [点我收藏+]

标签:ref   客户   lan   ado   详细   上传   保存   name   hadoop   

一、概述

  1.HDFS中的角色

      NameNode:

      负责管理整个文件系统的元数据

    Secondary NameNode:

 

    DataNode:

      负责管理用户的文件数据块    

     文件会按照固定的大小(blocksize)切成若干块(由上传的客户端进行切块处理,这样不大于128M切块大小的实际是多少就是多少)后分布式存储在若干台datanode

 

      Datanode会定期向Namenode汇报自身所保存的文件block信息,而namenode则会负责保持文件的副本数量

 

  详细角色信息,参考https://www.w3cschool.cn/hadoop/xvmi1hd6.html

大数据入门第六天——HDFS详解

标签:ref   客户   lan   ado   详细   上传   保存   name   hadoop   

原文地址:https://www.cnblogs.com/jiangbei/p/8376657.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!