任务一:虚拟机安装
任务二:Linux系统安装
Hadoop是一个开源的、可运行与Linux集群上的分布式计算平台,用户可借助Hadoop存储和分析大数据。
本项目包含的任务有基础环境的配置(虚拟机安装、Linux安装等),Hadoop集群搭建、验证。
任务一:虚拟机安装
(1)VMware Workstation(本课程使用该软件)
:https://pan.baidu.com/s/1izck7kVLcPSKI0tU0hEHCw 提取码:zdat
安装步骤如下:
步骤1:解压已下载的软件,然后进入解压后的目录,双击exe可执行文件。
步骤2:在弹出的“欢迎”窗口中,点击“下一步”按钮进入下一步;
步骤3:在弹出的“最终用户协议”窗口中,勾选“我接受许可协议中的条款”复选框,然后点击“下一步”按钮进入下一步;
步骤4:在弹出的“自定义安装”窗口中,可以点击“更改”按钮选择VMware Workstation的安装目录(本教程中采用默认目录)。选定安装位置后,勾选“增强型键盘驱动程序”,然后点击“下一步”按钮进入下一步;
步骤5:在弹出的“用户体验设置”窗口中,去掉“启动时检查产品更新”和“帮助完善VMware Workstation ”复选框前的勾,然后点击“下一步”按钮进入下一步;
步骤6:在弹出的“快捷方式”窗口中,直接点击“下一步”按钮进入下一步;
步骤7:在弹出的“已准备好安装VMware Workstation”窗口中,点击“安装”按钮开始安装;
步骤8:等待VMware安装完毕后,在弹出的“安装向导已完成”窗口中,点击“完成”按钮完成安装;
安装较简单,不详细讲解,具体可参照百度百科。
任务二:Linux系统安装及配置 一、CentOS7桌面版安装教程:CentOS 7安装教程(图文详解)_招牌DBA-CSDN博客_centos7安装教程
镜像文件网址:(1)网易开源镜像站(下载centos7或8)http://mirrors.163.com/
(2)阿里云官方镜像站(下载centos7或8)http://mirrors.aliyun.com
建议:1:将内核数量改为2(不需要太多)
2:将连接模式改为NET模式(后期做具体解释,用于三台虚拟机网络连接)
二、修改虚拟机及window网络配置
1:修改设计ip,网关等
(1):打开VMware,点击编辑,打开虚拟网络编制器
(2):点击更改设置(需要管理员权限),点击VMnet8,将子网ip设置为:192.168.121.0 子网掩码设置为:255.255.255.0
(不唯一,可改IP为其他,小编为统一可做修改)后点击DHCP,及NAT设置,分别设置为:
重点:1:起始ip:192.168.121.128,结束ip:192.168.121.254。即后面设置IP地址:192.168.121.X。前三不能变,X只可取128至254之间!!!
2:网关ip为:192.168.121.1。须与window的VMnet8保持一致,不然无法进行网络连接
2:window与虚拟机的VMnet8设置
1:在虚拟机centos7下,右键打开虚拟机设置,点击网络配置器,选择自定义VMnet8。
2:在window下打开网络连接,选择VMnet8,双击internet协议4,进入点击使用下列IP
(网关必须与虚拟机一致!!网关必须与虚拟机一致!!网关必须与虚拟机一致!!)
三、网络连接
1:右键虚拟机重命名为Hadoop01,进入虚拟机
修改主机名:vi /etc/hostname
将内容删除后添加:hadoop01
2:添加IP映射:vi /etc/hosts
添加三台虚拟机ip地址,及主机名(后面用克隆完成)
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 ::1 localhost localhost.localdomain localhost6.localdomain6 192.168.121.134 hadoop01 192.168.121.135 hadoop02 192.168.121.136 hadoop03
3:查网卡,修改ip地址配置,连接网络
ip addr(centos7)
ifconfig(centos6)
查询得网卡为:ens33
vi /etc/sysconfig/network-scripts/ifcfg-ens33
进入修改文件:BOOTPROTO=static:表示静态路由器协议,可以保持IP固定;
onBOOT=yes:启动网卡(用于与win连接)后添加ip内容分别为ip,网关。。。及搜狐8.8.8.8
TYPE=Ethernet PROXY_METHOD=none BROWSER_onLY=no BOOTPROTO=static DEFROUTE=yes IPV4_FAILURE_FATAL=no IPV6INIT=yes IPV6_AUTOCONF=yes IPV6_DEFROUTE=yes IPV6_FAILURE_FATAL=no IPV6_ADDR_GEN_MODE=stable-privacy NAME=ens33 UUID=57b6a9ee-3acb-44e5-88d1-b6cb0a6c528e DEVICE=ens33 onBOOT=yes IPADDR=192.168.121.134 GATEWAY=192.168.121.1 BROADCAST=192.168.121.255 NETMASK=255.255.255.0 DNS1=8.8.8.8
配置完后重启网卡服务:service network restart 或者 重启虚拟机 reboot(建议 因为前面修改主机名后需重启)
reboot
重启完最后连接网络:(保证联网)
ping www.baidu,com
4:克隆
1:在虚拟机界面右键Hadoop01选择克隆
2:重复操作生成Hadoop02,Hadoop03虚拟机
3:进入Hadoop02,Hadoop03需改对于的主机名和ip地址配置(ip映射不用改)
修改主机名:vi /etc/hostname
修改地址:vi /etc/sysconfig/network-scripts/ifcfg-ens33
对于的主机名为:hadoop02,hadoop03
ip地址:192.168.121.135,192.168.121.136。
最后ping www.baidu.com 检验
大学生小白,后续继续更新Hadoop集群,zookeeper,Hbase....



