栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 数据挖掘与分析

大学生教材:Hadoop的安装与集群搭建(超详细讲解)(一)linux网络配置及克隆

大学生教材:Hadoop的安装与集群搭建(超详细讲解)(一)linux网络配置及克隆

任务一:虚拟机安装

任务二:Linux系统安装


Hadoop是一个开源的、可运行与Linux集群上的分布式计算平台,用户可借助Hadoop存储和分析大数据。

本项目包含的任务有基础环境的配置(虚拟机安装、Linux安装等),Hadoop集群搭建、验证。

任务一:虚拟机安装

(1)VMware Workstation(本课程使用该软件)

:https://pan.baidu.com/s/1izck7kVLcPSKI0tU0hEHCw    提取码:zdat

安装步骤如下:

步骤1:解压已下载的软件,然后进入解压后的目录,双击exe可执行文件。

步骤2:在弹出的“欢迎”窗口中,点击“下一步”按钮进入下一步;

步骤3:在弹出的“最终用户协议”窗口中,勾选“我接受许可协议中的条款”复选框,然后点击“下一步”按钮进入下一步;

步骤4:在弹出的“自定义安装”窗口中,可以点击“更改”按钮选择VMware Workstation的安装目录(本教程中采用默认目录)。选定安装位置后,勾选“增强型键盘驱动程序”,然后点击“下一步”按钮进入下一步;

步骤5:在弹出的“用户体验设置”窗口中,去掉“启动时检查产品更新”和“帮助完善VMware Workstation ”复选框前的勾,然后点击“下一步”按钮进入下一步;

步骤6:在弹出的“快捷方式”窗口中,直接点击“下一步”按钮进入下一步;

步骤7:在弹出的“已准备好安装VMware Workstation”窗口中,点击“安装”按钮开始安装;

步骤8:等待VMware安装完毕后,在弹出的“安装向导已完成”窗口中,点击“完成”按钮完成安装;

安装较简单,不详细讲解,具体可参照百度百科。

任务二:Linux系统安装及配置 一、CentOS7桌面版安装教程:CentOS 7安装教程(图文详解)_招牌DBA-CSDN博客_centos7安装教程

镜像文件网址:(1)网易开源镜像站(下载centos7或8)http://mirrors.163.com/

                        (2)阿里云官方镜像站(下载centos7或8)http://mirrors.aliyun.com

建议:1:将内核数量改为2(不需要太多)

           2:将连接模式改为NET模式(后期做具体解释,用于三台虚拟机网络连接)

二、修改虚拟机及window网络配置

1:修改设计ip,网关等

        (1):打开VMware,点击编辑,打开虚拟网络编制器

 

        (2):点击更改设置(需要管理员权限),点击VMnet8,将子网ip设置为:192.168.121.0        子网掩码设置为:255.255.255.0

(不唯一,可改IP为其他,小编为统一可做修改)后点击DHCP,及NAT设置,分别设置为:

 

 

 

 重点:1:起始ip:192.168.121.128,结束ip:192.168.121.254。即后面设置IP地址:192.168.121.X。前三不能变,X只可取128至254之间!!!

        2:网关ip为:192.168.121.1。须与window的VMnet8保持一致,不然无法进行网络连接

 

2:window与虚拟机的VMnet8设置

1:在虚拟机centos7下,右键打开虚拟机设置,点击网络配置器,选择自定义VMnet8。

 

 

 2:在window下打开网络连接,选择VMnet8,双击internet协议4,进入点击使用下列IP

(网关必须与虚拟机一致!!网关必须与虚拟机一致!!网关必须与虚拟机一致!!)

 

 

 

 三、网络连接

1:右键虚拟机重命名为Hadoop01,进入虚拟机

修改主机名:vi /etc/hostname

将内容删除后添加:hadoop01

2:添加IP映射:vi /etc/hosts

添加三台虚拟机ip地址,及主机名(后面用克隆完成)

127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6.localdomain6

192.168.121.134 hadoop01
192.168.121.135 hadoop02
192.168.121.136 hadoop03

 3:查网卡,修改ip地址配置,连接网络

ip addr(centos7)

ifconfig(centos6)

 查询得网卡为:ens33

vi /etc/sysconfig/network-scripts/ifcfg-ens33

 进入修改文件:BOOTPROTO=static:表示静态路由器协议,可以保持IP固定;

onBOOT=yes:启动网卡(用于与win连接)后添加ip内容分别为ip,网关。。。及搜狐8.8.8.8

TYPE=Ethernet
PROXY_METHOD=none
BROWSER_onLY=no
BOOTPROTO=static
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=57b6a9ee-3acb-44e5-88d1-b6cb0a6c528e
DEVICE=ens33
onBOOT=yes

IPADDR=192.168.121.134
GATEWAY=192.168.121.1
BROADCAST=192.168.121.255
NETMASK=255.255.255.0
DNS1=8.8.8.8

 配置完后重启网卡服务:service network restart 或者 重启虚拟机 reboot(建议 因为前面修改主机名后需重启)

reboot

 重启完最后连接网络:(保证联网)

ping www.baidu,com

 

 

4:克隆

1:在虚拟机界面右键Hadoop01选择克隆

 

 

 

 

2:重复操作生成Hadoop02,Hadoop03虚拟机

3:进入Hadoop02,Hadoop03需改对于的主机名和ip地址配置(ip映射不用改)

修改主机名:vi /etc/hostname

修改地址:vi /etc/sysconfig/network-scripts/ifcfg-ens33

 对于的主机名为:hadoop02,hadoop03

ip地址:192.168.121.135,192.168.121.136。

最后ping www.baidu.com 检验

 

 大学生小白,后续继续更新Hadoop集群,zookeeper,Hbase....

 

 

 

 

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/279104.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号