栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

大数据平台集群(3个节点的搭建)

大数据平台集群(3个节点的搭建)

  1. 大数据平台集群(3个节点的搭建)通过克隆的方式搭建3个节点的集群;使用远程连接工具进行连接; (实验报告包括题目编写好一起提交)

(1)实验目的与原理

熟练虚拟机的克隆的使用。

理解集群的搭建需要的基础操作。

(2)实验内容与步骤

     搭建基础linux平台,进行相关的设置;

     克隆三个节点进行配置;

(3)主要仪器及耗材

笔记本电脑

(4)教学方式

案例教学法

(5)预习要求

预习Linux命令的相关知识点。

要求:认真编写,认真截图,认真截图 工作态度第一

  1. 安装基础linux系统平台,设置静态地址;截图

设置虚拟机的ip地址为静态状态,手动设置为192.168.64.130

  1. 安装jdk;安装mysql数据库;截图

安装jdk步骤

查看已经安装的jdk版本,使用rpm -e --nodeps命令将其卸载掉。

将jdk压缩包拖至/usr/local/java目录下,使用命令tar进行解压缩。

 

使用vi命令进入/etc/profile文件,配置环境变量。

用java -version命令检查jdk安装是否成功,出现jdk版本信息则安装成功。

安装mysql数据库

利用wget 命令,下载mysql的repo源

进行安装Mysql

安装完成后,重启MySQL服务,设置登陆密码

再次重启MySQL服务,设置Root账户远程连接密码,然后重启服务器 。

打开SQLyog验证ip地址为192.168.64.140的虚拟机的mysql数据库安装是否成功。

 关闭防火墙;截图

首先查看防火墙状态,然后使用systemctl stop firewalld.service命令关闭防火墙。

  1. 设置系统的时间同步;截图

设置统的时间同步,首先要安装ntp服务

使用ntpdate pool.ntp.org更新服务器上的时间

 克隆集群3个节点;并且设置他们的地址和机器名字;截图;

集群点1:hadoop1  ip地址:192.168.64.130

 

集群点2:hadoop2   ip地址:192.168.64.140

 

 

集群点3:hadoop3   ip地址:192.168.64.150

 

测试三个集群是否互相连通,使用多执行模式。一定要先将防火墙关闭。

Ping 192.168.64.130

Ping 192.168.64.140

Ping 192.168.64.150

 设置免密登录;截图

设置免密登录,首先要确保主机名称都设置好了,然后修改映射关系。

在三台主机的/etc/hosts文件中添加要互通的主机IP地址和主机名称。

 使用ssh-keygen命令在hadoop1上生成公钥和私钥

 使用ssh-keygen命令在hadoop2上生成公钥和私钥

 使用ssh-keygen命令在hadoop3上生成公钥和私钥

 相互告诉对方自己的公钥和秘钥

告诉hadoop1的公钥和秘钥

告诉hadoop2的公钥和秘钥

告诉hadoop3的公钥和秘钥

测试免密

测试hadoop1给hadoop2传文件,从hadoop1中传送文件ylp到hadoop2中,成功传送,且不需要输入密码,免密登录成功。

 测试hadoop2给hadoop3传文件,从hadoop2中传送文件ylp到hadoop3中,成功传送,且不需要输入密码,免密登录成功。

 测试hadoop1给hadoop3传文件,从hadoop1中传送文件ylp1到hadoop3中,成功传送,且不需要输入密码,免密登录成功。

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/762159.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号