- 大数据平台集群(3个节点的搭建)通过克隆的方式搭建3个节点的集群;使用远程连接工具进行连接; (实验报告包括题目编写好一起提交)
(1)实验目的与原理
熟练虚拟机的克隆的使用。
理解集群的搭建需要的基础操作。
(2)实验内容与步骤
搭建基础linux平台,进行相关的设置;
克隆三个节点进行配置;
(3)主要仪器及耗材
笔记本电脑
(4)教学方式
案例教学法
(5)预习要求
预习Linux命令的相关知识点。
要求:认真编写,认真截图,认真截图 工作态度第一
- 安装基础linux系统平台,设置静态地址;截图
设置虚拟机的ip地址为静态状态,手动设置为192.168.64.130
- 安装jdk;安装mysql数据库;截图
安装jdk步骤
查看已经安装的jdk版本,使用rpm -e --nodeps命令将其卸载掉。
将jdk压缩包拖至/usr/local/java目录下,使用命令tar进行解压缩。
使用vi命令进入/etc/profile文件,配置环境变量。
用java -version命令检查jdk安装是否成功,出现jdk版本信息则安装成功。
安装mysql数据库
利用wget 命令,下载mysql的repo源
进行安装Mysql
安装完成后,重启MySQL服务,设置登陆密码
再次重启MySQL服务,设置Root账户远程连接密码,然后重启服务器 。
打开SQLyog验证ip地址为192.168.64.140的虚拟机的mysql数据库安装是否成功。
关闭防火墙;截图
首先查看防火墙状态,然后使用systemctl stop firewalld.service命令关闭防火墙。
- 设置系统的时间同步;截图
设置统的时间同步,首先要安装ntp服务
使用ntpdate pool.ntp.org更新服务器上的时间
克隆集群3个节点;并且设置他们的地址和机器名字;截图;
集群点1:hadoop1 ip地址:192.168.64.130
集群点2:hadoop2 ip地址:192.168.64.140
集群点3:hadoop3 ip地址:192.168.64.150
测试三个集群是否互相连通,使用多执行模式。一定要先将防火墙关闭。
Ping 192.168.64.130
Ping 192.168.64.140
Ping 192.168.64.150
设置免密登录;截图
设置免密登录,首先要确保主机名称都设置好了,然后修改映射关系。
在三台主机的/etc/hosts文件中添加要互通的主机IP地址和主机名称。
使用ssh-keygen命令在hadoop1上生成公钥和私钥
使用ssh-keygen命令在hadoop2上生成公钥和私钥
使用ssh-keygen命令在hadoop3上生成公钥和私钥
相互告诉对方自己的公钥和秘钥
告诉hadoop1的公钥和秘钥
告诉hadoop2的公钥和秘钥
告诉hadoop3的公钥和秘钥
测试免密
测试hadoop1给hadoop2传文件,从hadoop1中传送文件ylp到hadoop2中,成功传送,且不需要输入密码,免密登录成功。
测试hadoop2给hadoop3传文件,从hadoop2中传送文件ylp到hadoop3中,成功传送,且不需要输入密码,免密登录成功。
测试hadoop1给hadoop3传文件,从hadoop1中传送文件ylp1到hadoop3中,成功传送,且不需要输入密码,免密登录成功。



