栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

greenplum学习 第二弹

greenplum学习 第二弹

集群软件安装

1)安装依赖(所有机器)root用户执行

[root@mdw ~]# yum install -y zip unzip openssh-clients ed ntp net-tools perl perl-devel perl-ExtUtils* mlocate lrzsz parted apr apr-util bzip2 krb5-devel libevent libyaml rsync

2)执行安装程序(root用户执行)

sudo yum install ./greenplum-db--.rpm

3)将已安装文件的所有者和组更改为 管理员

$ sudo chown -R gpadmin:gpadmin /usr/local/greenplum*
$ sudo chgrp -R gpadmin /usr/local/greenplum*

注意:如果要进行自定义安装

请查看【Installing the Greenplum Database Software | Greenplum Docs https://docs.greenplum.org/6-16/install_guide/install_gpdb.html】

4)集群互信,免密登陆(root用户执行)

生成密钥
 GP6.x开始gpssh-exkeys命令已经不带自动生成密钥了,所以需要自己手动生成
 [root@mdw greenplum-db]# ssh-keygen -t rsa
 提示语不用管,一直按Enter键使用默认值即可

5)将本机的公钥复制到各个节点机器的authorized_keys文件中

 [root@mdw greenplum-db]# ssh-copy-id dis-gp-sdw1
 [root@mdw greenplum-db]# ssh-copy-id dis-gp-sdw2
 [root@mdw greenplum-db]# ssh-copy-id dis-gp-sdw3

6)使用gpssh-exkeys 工具,打通n-n的免密登陆

vi all_host
 增加所有hostname到文件中
 dis-gp-mdw
 dis-gp-sdw1
 dis-gp-sdw2
 dis-gp-sdw3
 [root@mdw greenplum-db]# source /home/gpadmin/greenplum-db/greenplum_path.sh
 [root@mdw greenplum-db]# gpssh-exkeys -f all_host
 打通gpadmin 用户免密登录
 [root@mdw greenplum-db-6.2.1]# su - gpadmin
 [gpadmin@mdw ~]$ source /home/gpadmin/greenplum-db/greenplum_path.sh
 [gpadmin@mdw ~]$ ssh-keygen -t rsa
 [gpadmin@mdw greenplum-db]$ ssh-copy-id dis-gp-sdw1
 [gpadmin@mdw greenplum-db]$ ssh-copy-id dis-gp-sdw2
 [gpadmin@mdw greenplum-db]$ ssh-copy-id dis-gp-sdw3
 [gpadmin@mdw greenplum-db]$ mkdir gpconfigs
 [gpadmin@mdw greenplum-db]$ cd gpconfigs
 [gpadmin@mdw greenplum-db]$ vi all_hosts
 把所有主机hostname添加进去
 [gpadmin@mdw ~]$ gpssh-exkeys -f /home/gpadmin/gpconfigs/all_hosts
 [gpadmin@mdw greenplum-db]$ vi /home/gpadmin/gpconfigs/seg_hosts
 把所有数据节点hostname添加进去

7)在主备Master主机上创建数据存储区

主服务器上的数据目录位置与段上的不同。master 不存储任何用户数据,仅系统目录表和系统元数据存储在 master 实例上,因此您不需要指定与段上一样多的存储空间。

  1. 创建或选择一个目录作为您的主数据存储区。这个目录应该有足够的磁盘空间来存放你的数据并且归管理员用户和组。例如,运行以下命令根:
    # mkdir -p /data/master
  2. 将此目录的所有权更改为 管理员 用户。例如:
    chown gpadmin:gpadmin /data/master
  3. 使用 全球定位系统,也在您的备用主服务器上创建主数据目录位置。例如:
    # source /usr/local/greenplum-db/greenplum_path.sh 
    # gpssh -h smdw -e 'mkdir -p /data/master'
    # gpssh -h smdw -e 'chown gpadmin:gpadmin /data/master'

8)在 Segment 主机上创建数据存储区

在所有段主机上创建数据目录位置
  1. 在 master 主机上,登录为 根:
    #su
  2. 创建一个名为 hostfile_gpssh_segonly. 对于每个段主机,该文件应该只有一个机器配置的主机名。例如,如果您有三个网段主机:
    sdw1
    sdw2
    sdw3
  3. 使用 全球定位系统, 使用 hostfile_gpssh_segonly您刚刚创建的文件。例如:
    # source /usr/local/greenplum-db/greenplum_path.sh 
    # gpssh -f hostfile_gpssh_segonly -e 'mkdir -p /data/primary'
    # gpssh -f hostfile_gpssh_segonly -e 'mkdir -p /data/mirror'
    # gpssh -f hostfile_gpssh_segonly -e 'chown -R gpadmin /data/*'

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/601802.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号