码迷,mamicode.com
首页 > 其他好文 > 详细

使用history命令查看作业的整体执行情况

时间:2016-04-10 14:07:07      阅读:168      评论:0      收藏:0      [点我收藏+]

标签:

1)通过使用history命令,我们可以深入到一个Job的任务级层面查看执行最快的任务,以及执行最慢的任务,以及其他的有用信息。命令如下:

hadoop job -history /output

“/ouptut”就是要查询的job的输出路径,如果输出路径位于hdfs的根目录下,有时候会忘记添加“/”,也就是使用如下命令: 

hadoop job -history output

就会出现如下提示:

技术分享  

就是因为没有提高正确的路径,所以找不到文件,触发了IO异常。

2)当我们使用了history命令,得到关于job的关键信息如下:

技术分享

 

技术分享

 

技术分享

技术分享

 

技术分享

 

使用history命令查看作业的整体执行情况

标签:

原文地址:http://www.cnblogs.com/lz3018/p/5373975.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!