栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 系统运维 > 运维 > Linux

大数据分析技术:hadoop分布模式安装

Linux 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

大数据分析技术:hadoop分布模式安装

hadoop分布模式安装

1、删除“optmodulehadoopdata”和“optmodulehadooplog”

rm -rf data

rm -rf logs

2、删除“~/.ssh”目录中的文件authorized_keys  id_rsa  id_rsa.pub,清空known_hosts

rm -f authorized_keys

rm -f i*

echo "">known_hosts

3、修改 hosts 文件

192.168.56.110 hadoop01

192.168.56.120 hadoop02

192.168.56.130 hadoop03

4、配置workers

hadoop01

hadoop02

hadoop03

5、使用“hadoop01”完全克隆“hadoop02”,“hadoop03”

(1)、配置hadoop02,hadoop03的ip和主机名。

vi /etc/sysconfig/network-scripts/ifcfg-ens33

hostnamectl set-hostname

(2)、配置三台主机的免密登录(注:集群中的三台主机都要做)

ssh-keygen -t rsa

ssh-copy-id root@hadoop01

ssh-copy-id root@hadoop02

ssh-copy-id root@hadoop03

6、配置完成后,执行 NameNode 的格式化:

hdfs namenode -format

成功的话,会看到 “successfully formatted” 的提示

7、接着开启 hdfs和 yarn 守护进程

Start-dfs.sh

Start-yarn.sh

8、验证 Hadoop 是否启动成功

jps

9、问NameNode节点

可以通过浏览器访问HDFS的页面,访问地址为:IP地址:50070

10、访问ResourceManager节点

通过浏览器访问Yarn的页面,访问地址为:http://IP地址:8088

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/871257.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号