首页 > 其他 > 详细

检查hdfs文件块占用情况

时间:2020-06-24 17:51:50      阅读:59      评论:0      收藏:0      [点我收藏+]

 

批量执行检查脚本:

#!/bin/bash
file_name="$1"
if [ -z "$file_name" ];then
	echo "Pls input file path"
	exit 1
fi

cat "$file_name"| while read line
do
	hadoop fsck $line -blocks > temp.log
	echo $line >> final.log
	tail -11 temp.log >> final.log
	echo "">temp.log
	echo "Finish check $line"
done

  

传入参数为文件名,将该文件和脚本放在同一目录下,该文件中每行记录一个hdfs中的文件全路径

如: /user/test/liwt/sic/studentTable

获取hdfs中文件列表的方式很多,在此不做赘述。

 

检查hdfs文件块占用情况

原文:https://www.cnblogs.com/liwutao/p/13188743.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!