我试图循环迭代,在每次迭代时tar几个目录,然后比较两者的md5总和。我注意到我的第一个tar语句产生的tar文件比目录的实际路径高一级。即声明:
tar -czvf ${folder_name}.tar.gz /tmp/psk1/hadoop_validation$ENV/${folder_name}
在${folder_name}.tar.gz
而非/tmp/psk1/
/tmp/psk1/hadoop_validation$ENV/
和第二个tar语句:
tar -czvf ${folder_name}.tar.gz ${edge_base_dir}/wlossf$ENV/app/${folder_name}
根本不生成tar文件。我甚至无法在实际路径上的某个层面找到它。
hdfs dfs -ls /haas/wlf/wlossf$ENV/app | while read rec; do
echo $rec
folder_path=`echo ${rec} | awk -F ' ' '{print $8}'`
folder_name=`echo ${folder_path} | awk -F '/' '{print $6}'`
if [ ! -z ${folder_name} ] && [ ! -z ${folder_path} ]; then
hdfs dfs -get ${folder_path} /tmp/psk1/hadoop_validation$ENV/
if [ $? -eq 0 ]; then
echo "Hadoop to local copy job Successful"
else
echo "Hadoop to local copy job Failed"
fi
tar -czvf ${folder_name}.tar.gz /tmp/psk1/hadoop_validation$ENV/${folder_name}
hadoop_md5=$(md5sum /tmp/psk1/hadoop_validation$ENV/${folder_name}.tar.gz)
tar -czvf ${folder_name}.tar.gz ${edge_base_dir}/wlossf$ENV/app/${folder_name}
edge_md5=$(md5sum ${edge_base_dir}/wlossf$ENV/app/${folder_name}.tar.gz)
if [ ${hadoop_md5} == ${edge_md5} ]; then
echo "${folder_name} is good"
else
echo "${folder_name} is bad"
fi
fi
echo ${folder_name}
echo ${folder_path}
done
我在这里缺少什么?任何帮助将不胜感激。
谢谢。
答案 0 :(得分:1)
正如mouviciel在评论中所说,tar
默认情况下会在当前工作目录中创建文件。
只需在tar.gz文件前加上该文件夹的前缀,它就会在您想要的位置创建它:
tar -czvf /tmp/psk1/hadoop_validation$ENV/${folder_name}.tar.gz /tmp/psk1/hadoop_validation$ENV/${folder_name}
请注意,由于您将在归档的同一文件夹中创建tar,因此作为输出的一部分,您将收到file changed as we read it
警告。无需担心。