码迷,mamicode.com
首页 > 其他好文 > 详细

HDFS面试准备

时间:2020-03-16 13:14:29      阅读:72      评论:0      收藏:0      [点我收藏+]

标签:多级目录   执行命令   副本   修改   记录   执行命令行   面试   自动   本地   

hdfs有点:高容错性。自动保存多个副本,副本丢失自动恢复,文件处理规模大,可以放置在廉价的机器上面

缺点:hdfa对每一个小文件都有记录,无论大小都会占用内存解决方法是合并处理,不适合低延时的数据访问技术图片

 

文件块的大小决定于磁盘的数据传输效率:一般的是128mb,老版本是64mb,本地模式是32mb,

技术图片太大的话就会一直占用线程传输数据,倒是结果还会很慢。。

 

 创建多级目录:mkdir -p *** 需要添加多级目录的-p

hdffs只支持追加不支持在线修改,就是只支持在他后面追加文件内容。不能修改

bin/hadoop fs 执行命令行,是父类,bin/hdfs dfs是一个子类 

 

HDFS面试准备

标签:多级目录   执行命令   副本   修改   记录   执行命令行   面试   自动   本地   

原文地址:https://www.cnblogs.com/0123wtdd/p/12502765.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!