首页 > 其他 > 详细

使用history命令查看作业的整体执行情况

时间:2016-04-10 14:06:27      阅读:160      评论:0      收藏:0      [点我收藏+]

1)通过使用history命令,我们可以深入到一个Job的任务级层面查看执行最快的任务,以及执行最慢的任务,以及其他的有用信息。命令如下:

hadoop job -history /output

“/ouptut”就是要查询的job的输出路径,如果输出路径位于hdfs的根目录下,有时候会忘记添加“/”,也就是使用如下命令: 

hadoop job -history output

就会出现如下提示:

技术分享  

就是因为没有提高正确的路径,所以找不到文件,触发了IO异常。

2)当我们使用了history命令,得到关于job的关键信息如下:

技术分享

 

技术分享

 

技术分享

技术分享

 

技术分享

 

使用history命令查看作业的整体执行情况

原文:http://www.cnblogs.com/lz3018/p/5373975.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!