栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

hadoop

hadoop

安装VM和centos

1.安装vm15蓝屏  (版本和电脑不兼容)

        下载vm16

2.centos,单独放在一个文件夹中

修改主机名,IP,映射

1.hostname  (hostnamectl  set-hostname  主机名)

2.vi /etc/hostname(重启)

(二)IP修改:vi /etc/sysconfig/network-scripts/ifcfg-ens33

1.修改为静态获取IP

BOOTPROTO="static"

2.添加IP地址

IPADDR=192.168.1.100

3.添加网关

GATEWAY=192.168.1.2

4.添加子网掩码

NETMASK=255.255.255.0

5.添加域名解析器

DNS1=192.168.1.2

(三)映射

vi /etc/hosts

网络配置

1.虚拟机

2.windows电脑(遇到电脑没有vmnet8的下载CCleaner,清理注册表,重置虚拟机网络)

3.调整防火墙(建议关闭防火墙-

1.查看防火墙状态systemctl status firewalld-

2.关闭防火墙systemctl stop firewalld-

3.开机防火墙不启动systemctl disable firewalld

4.ping IP地址{1.ping外部IP网址。

         2.ping 百度网址

5.重启网络:service network restart

链接moba

jdk、hadoop部署

1.在opt下面创建software,module两个文件夹

2.安装jdk

3.安装hadoop

4.伪分布部署

5.克隆虚拟机

6.完全分布式部署

1.免密

2.修改环境变量

3.(修改配置文件-hadoop-env.sh  hdfa-site.xml  yarn-site.xml  mapred-site.xml)

4.集群分发scp-r 用户名主机名: 地址  

5.格式化namenode(rm -rf data  rm -rf logs)hdfs namenode -format  

6.单启,群启)

hive配置

1.安装mysql

2.安装hive

3.修改配置环境

4.启动

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/662836.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号