栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

Hadoop(伪分布搭建)

Hadoop(伪分布搭建)

步骤

1、切换到Hadoop下面的etc

切换命令:cd /opt/module/hadoop-3.1.3/etc/hadoop/

用 ll查看,下图标注的是需要配置的文件

 2、下面将对这四个文件进行配置

(1)core-site.xml 

命令:vi core-site.xml

进入后 将中的文件删掉替换成如下内容后退出

    

        fs.defaultFS

        hdfs://hadoop100:9820

    

        hadoop.data.dir

        /opt/module/hadoop-3.1.3/data

    

(2)、hdfs-site.xml

命令:vi hdfs-site.xml

进入后 将中的文件删掉替换成如下内容后退出

 进入后 将中的文件删掉替换成如下内容后退出




        dfs.replication
        1

(3)、yarn-site.xml

命令:vi yarn-site.xml

进入后 将中的文件删掉替换成如下内容后退出

        yarn.nodemanager.aux-services

        mapreduce_shuffle

    

    

        yarn.resourcemanager.hostname

        hadoop101

    

    

        yarn.nodemanager.env-whitelist

        JAVA_HOME,HADOOP_COMMON_HOME,HADOOP_HDFS_HOME,HADOOP_CONF_DIR,CLASSPATH_PREPEND_DISTCACHE,HADOOP_YARN_HOME,HADOOP_MAPRED_HOME

    

(4)、mapred-site.xml

命令:vi mapred-site.xml

进入后 将中的文件删掉替换成如下内容后退出

 

    mapreduce.framework.name

    yarn

  

3、启动

(1)、格式化namenode(第一次启动时格式)

命令:hdfs namenode –format

(2)、启动启动namenode

命令:hdfs --daemon start namenode

(3)、启动datanode

命令:hdfs--daemon start datanode

(4)、启动resourcemanager

命令:yarn --daemon start resourcemanager

(5)、启动nodemanager

命令: yarn --daemon start nodemanager

4、查看是否启动成功

 

命令:jps

5、杀掉进程

命令:kill 

 

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/671714.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号