大数据系列-脚本:一键同步文件

  |   0 评论   |   0 浏览

一键同步文件脚本

废话不多说,直接上脚本
在Linux的用户目录,bin文件夹中,例如:/home/yonghu/bin

创建文件

vim xsync

#!/bin/bash
#1. 判断参数个数
if [ $# -lt 1 ]
then
  echo Not Enough Arguement!
  exit;
fi
#2. 遍历集群所有机器
for host in hadoop102 hadoop103 hadoop104
do
  echo ====================  $host  ====================
  #3. 遍历所有目录,挨个发送
  for file in $@
  do
    #4 判断文件是否存在
    if [ -e $file ]
    then
      #5. 获取父目录
      pdir=$(cd -P $(dirname $file); pwd)
      #6. 获取当前文件的名称
      fname=$(basename $file)
      ssh $host "mkdir -p $pdir"
      rsync -av $pdir/$fname $host:$pdir
    else
      echo $file does not exists!
    fi
  done
done

上述代码中的 hadoop102 hadoop103 hadoop104 为集群机器的地址

使用这个脚本的前提是要集群间的ssh已经设置好。

使用的时候

xsync xxxxxx

就可以了


作者:大鹏
转载请标注来源:大鹏的技术博客