栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Java

Hadoop集群的搭建及配置步骤

Java 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

Hadoop集群的搭建及配置步骤

1、yum install -y vsftpd
2、vim /etc/vsftpd/vsftpd.conf
#开启自启动服务
systemctlenable vsftpd.service
#开启FTP服务
systemctl start vsftpd.service
3、systemctl stop firewalld
systemctl disable firewalld.service
4、mkdir soft #存放压缩包
mkdir data
mkdir server #存放解压后jdk于hadoop
5、上传jdk、hadoop压缩包到soft
6、#解压
tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/server/
7、cd /etc/profile.d
8、vim my_env.sh
9、[root@master profile.d]# source /etc/profile
java
10、安装hadoop
11、克隆 配置hostname ifcfg-ens33 reboot
12、配置免密登录 ssh-keygen -trsa ssh-copy-id master
13、配置同步时钟;安装 ntp 服务 yum -y install ntp
14、配置hadoop 4个文件(core-site.xml、hdfs-site.xml、yarn-site.xml、mapred-site.xml)和 workers
15、格式化 hdfs namenode -format(切记:只能格式化一次,如再一次格式化,datanode ID不一致需删除文件后重新格式化)
16、启动集群
sbin/start-dfs.sh
sbin/start-yarn.sh (启动resourcemanager需在配置的节点启动)
17、启动日志相关服务
bin/mapred —daemon start historyserver

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/285174.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号