虚拟机集群启动,Hadoop常用命令
(一)、启动hdfs
1,namenode节点第一次初始化
在namenode安装节点执行命令:
hadoop namenode -format
2,单节点启动、停止
在namenode节点执行命令:一般位hadoop101节点
hadoop-daemon.sh start namenode
hadoop-daemon.sh stop namenode
在secondarynamenode节点执行命令:一般位hadoop103节点 hadoop-daemon.sh start secondarynamenode hadoop-daemon.sh stop secondarynamenode 在datanode节点执行命令:所有节点hadop101、hadoop102、hadoop103 hadoop-daemon.sh start datanode hadoop-daemon.sh stop datanode
3,集群启动、停止
在namenode节点执行命令
start-dfs.sh
stop-dfs.sh
4,网页查阅hdfs系统运行情况
网址:http://hadoop101:50070/dfshealth.html#tab-overview
5,查看节点存活率
hadoop dfsadmin -report
(二)启动yarn
1,单节点启动、停止
在resourcemanager节点执行命令:一般位hadoop103节点
yarn-daemon.sh start resourcemanager
yarn-daemon.sh stop resourcemanager
在nodemanager节点执行命令:所有节点hadop101、hadoop102、hadoop103 yarn-daemon.sh start nodemanager yarn-daemon.sh stop nodemanager
2,集群启动、停止
在resourcemanager节点执行命令
start-yarn.sh
stop-yarn.sh
3,网页查阅yarn调度系统资源情况
网址:http://hadoop103:8088/cluster/apps
(三)启动历史服务器
1,在配置历史服务器的节点上:hadoop101
mr-jobhistory-daemon.sh start historyserver
mr-jobhistory-daemon.sh stop historyserver
2,网页查阅历史服务器job调度日志
网址:http://hadoop101:19888/jobhistory/app
(四)防火墙
1,查看防火墙状态
systemctl status firewalld.service
2,关闭防火墙
systemctl stop firewalld.service
3,让防火墙永久失效
systemctl disable firewalld.service



