栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

三、集群分发脚本

三、集群分发脚本

1)进入当前用户的家目录

注意:在家目录下编写脚本文件不用配置环境变量,使用echo $PATH可查看环境变量。

2)创建bin目录
mkdir bin
3)进入bin目录
cd bin/
4)创建脚本文件
vim xsync.sh

#!/bin/bash
#1.判断参数个数
if [ $# -lt 1 ]
then
    echo Not Enough Arguement!
    exit
fi
#2.遍历集群所有机器
for host in hadoop102 hadoop103 hadoop104
do
    echo ============ $host ===========
    #3.遍历所有目录,挨个发送 
    for file in $@
    do
        #4.判断文件是否存在
        if [ -e $file ]
        then
            #5.获取父目录
            pdir=$(cd -P $(dirname $file); pwd)
            #6.获取当前文件的名称
            fname=$(basename $file)
            ssh $host "mkdir -p $pdir"
            rsync -av $pdir/$fname $host:$pdir
        else
            echo $file does not exists!
        fi
    done
done

5)为xsync.sh添加执行权限
chmod u+x xsync.sh
6)配置SSH免密登录
(1)分别在hadoop102、hadoop103、hadoop104生成公钥和私钥
ssh-keygen -t rsa
(2)然后敲(三个回车),就会在.ssh目录下生成两个文件id_rsa(私钥)、id_rsa.pub(公钥);生成的.ssh文件夹在当前用户的家目录下面。

(3)分别在hadoop102、hadoop103、hadoop104执行,将公钥拷贝到免密登录的目标机器上
ssh-copy-id hadoop102
ssh-copy-id hadoop103
ssh-copy-id hadoop104

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/663267.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号