栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

创建xsync进行hadoop快速分发差异文件

创建xsync进行hadoop快速分发差异文件

前往环境变量下的一个目录

使用命令echo $PATH查看

  不同的用户这个文件夹不同

在这个目录下创建一个目录bin

在这个bin目录下创建文件xsync,并在这个文件中添加如下代码

#!/bin/bash
#1. 判断参数个数
if [ $# -lt 1 ]
then
echo Not Enough Arguement!
exit;
fi
for host in hadoop102 hadoop103 hadoop104
do
echo ==================== $host ====================
#3. 遍历所有目录,挨个发送
for file in $@
do
#4. 判断文件是否存在
if [ -e $file ]
then
#5. 获取父目录
pdir=$(cd -P $(dirname $file); pwd)
#6. 获取当前文件的名称
fname=$(basename $file)
ssh $host "mkdir -p $pdir"
rsync -av $pdir/$fname $host:$pdir
else
echo $file does not exists!
fi
done
done
~

其中的hadoop102、hadoop103、hadoop104是对应分发的虚拟机主机名

修改 xsync的权限        chmod +x xsync

这样就可以使用这个文件进行分发(针对的是同个位置)

命令:./bin/xsync 源文件

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/751852.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号