MD5文件自动上传脚本

#!/bin/ksh
cd /home/hadoop/tt
#进入目标目录tt
filename=($(ls -lt wendang |grep "^-"|awk '{print $9}'))
#列出目录wendang下所有文件名
number=${#filename[@]}
#number赋值为目录中文件数量
for((i=0;i<$number;i++))
#循环
do
    if [ -f oldfiles.log ]
#查看oldfiles.log日志是否存在
    then
          md5=`md5sum wendang/${filename[$i]}|awk '{print $1}'`
#取出对应行文件的唯一标识MD5值
  cat oldfiles.log|grep "$md5" >/dev/null
#查看日志中是否有相同的MD5值
          if [ $? -eq 1 ]
#判断
          then
hadoop fs -put wendang/${filename[$i]} /data
#没有对应值则执行hadoop命令上传文件
if [ $? -eq 0 ]
                then
echo $md5 >> oldfiles.log
rm wendang/${filename[$i]}
#上传成功则把MD5值记录入oldfiles.log并删除文件
else
echo fail
fi