栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

虚拟机集群启动,Hadoop常用命令

虚拟机集群启动,Hadoop常用命令

虚拟机集群启动,Hadoop常用命令

(一)、启动hdfs
1,namenode节点第一次初始化
在namenode安装节点执行命令:
hadoop namenode -format

2,单节点启动、停止
在namenode节点执行命令:一般位hadoop101节点
hadoop-daemon.sh start namenode
hadoop-daemon.sh stop namenode

 在secondarynamenode节点执行命令:一般位hadoop103节点
 hadoop-daemon.sh start secondarynamenode
 hadoop-daemon.sh stop secondarynamenode
 
 在datanode节点执行命令:所有节点hadop101、hadoop102、hadoop103
 hadoop-daemon.sh start datanode
 hadoop-daemon.sh stop datanode

3,集群启动、停止
在namenode节点执行命令
start-dfs.sh
stop-dfs.sh

4,网页查阅hdfs系统运行情况
网址:http://hadoop101:50070/dfshealth.html#tab-overview

5,查看节点存活率
hadoop dfsadmin -report

(二)启动yarn
1,单节点启动、停止
在resourcemanager节点执行命令:一般位hadoop103节点
yarn-daemon.sh start resourcemanager
yarn-daemon.sh stop resourcemanager

 在nodemanager节点执行命令:所有节点hadop101、hadoop102、hadoop103
 yarn-daemon.sh start nodemanager
 yarn-daemon.sh stop nodemanager

2,集群启动、停止
在resourcemanager节点执行命令
start-yarn.sh
stop-yarn.sh

3,网页查阅yarn调度系统资源情况
网址:http://hadoop103:8088/cluster/apps

(三)启动历史服务器
1,在配置历史服务器的节点上:hadoop101
mr-jobhistory-daemon.sh start historyserver
mr-jobhistory-daemon.sh stop historyserver

2,网页查阅历史服务器job调度日志
网址:http://hadoop101:19888/jobhistory/app

(四)防火墙
1,查看防火墙状态
systemctl status firewalld.service

2,关闭防火墙
systemctl stop firewalld.service

3,让防火墙永久失效
systemctl disable firewalld.service

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/762196.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号