码迷,mamicode.com
首页 > 其他好文 > 详细

hdfs统计行数和统计文件大小

时间:2014-12-10 12:41:03      阅读:225      评论:0      收藏:0      [点我收藏+]

标签:style   os   使用   sp   on   文件   bs   ad   size   

使用hdfs有时候需要统计文件行数和文件的大小

1.hdfs下载文件夹中多个文件

hadoop fs -get  /目录   目录


2.统计多个文件行数

hadoop fs -cat  /文件* | wc -l


3.统计文件大小

hadoop fs -count /文件*


统计单个文件  只需要精确到文件即可  

hdfs统计行数和统计文件大小

标签:style   os   使用   sp   on   文件   bs   ad   size   

原文地址:http://blog.csdn.net/qingmu0803/article/details/41843369

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!