码迷,mamicode.com
首页 > 其他好文 > 详细

hadoop 常用命令行操作小结

时间:2015-01-26 21:02:51      阅读:202      评论:0      收藏:0      [点我收藏+]

标签:

 

 

1、检测hadoop运行状态信息

  hadoop dfsadmin -report  打印出hadoop中硬盘的使用信息

  

2、 hadoop中创建归档文件

  hadoop archive -archiveName example.har -p /tmp/input dir1 dir2 -r 2 /tmp/output/

  其中example.har为hadoop中归档文件的特殊格式,-p指定父目录,dir1和dir2为需要归档的文件夹,-r指定了复制的份数,最后为结果输出目录

 

3、 hadoop安全模式

  hadoop dfsadmin -safemode enter | leave | get | wait

  分别表示进入,离开,获取信息,等待

  分布式文件系统刚启动或者datanode汇报给namenode的块信息与namenode中的元数据不同比例超过阀值时,hadoop会进入安全模式。安全阀值由配置项dfs.safemode.threshold.pct来确定。

  默认为0.999。系统处于安全模式中时,不允许对文件进行修改或删除。

 

4、 hadoop 将文件内容追加到hdfs上

  hadoop dfs -appendToFile localfile1 /tmp/output/file2

  hadoop dfs -appendToFile localfile1 localfile2 /tmp/output/file3

 

hadoop 常用命令行操作小结

标签:

原文地址:http://www.cnblogs.com/ayy2014/p/4251229.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!