大数据项目-5.hadoop（六.hadoop安装）

hadoop3.3.2官网地址

解压

tar -axvf hadoop-3.2.2.tar.gz

修改hadoop-env.sh ，配置Java环境。

cd /etc/hadoop/hadoop-3.2.2/etc/hadoop
vim hadoop-env.sh

根据自己环境的java路径来填写。

启动hadoop

cd /etc/hadoop/hadoop-3.2.2/bin
./hadoop

修改core-site.xml

cd /etc/hadoop/hadoop-3.2.2/etc/hadoop
vim core-site.xml

添加以下代码

        
        
                fs.defaultFS
                hdfs://10.10.10.11:8020/
        
        
        
                hadoop.tmp.dir
                /home/liucf/data/dfs/tmp
        

hdfs-site.xml

        
        
                dfs.replication
                2
        
        
        
                dfs.permissions.enabled
                false
        

workers
配置另外俩台服务器。

10.10.10.12
10,10,10,13            

scp另外俩台服务器。

cd /etc
scp -r hadoop root@10.10.10.12:/etc/
scp -r hadoop root@10.10.10.13:/etc/

格式化

cd /etc/hadoop/hadoop-3.2.2/bin
./hdfs namenode -format

启动

在10.10.10.11节点
cd /etc/hadoop/hadoop-3.2.2/sbin
./hadoop-daemon.sh  start namenode

在10.10.10.12和10.10.10.13节点
cd /etc/hadoop/hadoop-3.2.2/sbin
./hadoop-daemon.sh  start datanode

查看web页面
http://10.10.10.11:9870/

配置yarn
配置yarn-site.xml。scp另外俩台服务器。

cd /etc
scp -r hadoop root@10.10.10.12:/etc/
scp -r hadoop root@10.10.10.13:/etc/

启动yarn

在10.10.10.11节点
cd /etc/hadoop/hadoop-3.2.2/sbin
./yarn-daemon.sh start resourcemanager

在10.10.10.12和10.10.10.13节点
cd /etc/hadoop/hadoop-3.2.2/sbin
./yarn-daemon.sh start nodemanager