栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Java

Linux系统上Hadoop的配置

Java 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

Linux系统上Hadoop的配置

目录

1、免密登录

2、设置java安装的根目录

3、hadoop参数配置(hadoop地址配置!)


1、免密登录

      ①cd.ssh
      ②ls
      ③ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
      ④ls (多了两个文件 id_rsa、id_rsa.pub)
      ⑤cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
      ⑥cat authorized_keys
      ⑦ssh root@116.63.69.99 ""ls /   (发现不需要密码了!)


2、设置java安装的根目录

        ①cd /usr/app/hadoop-2.9.2/etc/hadoop
        ② vim hadoop-env.sh     (配置文件)
               将JAVA_HOME={$JAVA....}改成(JAVA_HOME=/usr/app/jdk8)


3、hadoop参数配置(hadoop地址配置!)


     ①vim /etc/hosts  (编辑私网ip192.168.0.152   note1)
     ②cd /usr/app/hadoop-2.9.2/etc/hadoop  
     ③vim core-site.xml   (编辑hadoop地址配置文件!)
          末尾加上这些配置!!!!!
           
                     
                     
                              fs.defaultFS
                              hdfs://note1:9000
                     

             

     ④进入hadoop-2.9.2目录(cd .. 连续两次!然后ls查看!)

                能看到如下文件:

                 bin            etc            include  libexec      NOTICE.txt  sbin
            core-site.xml  hadoop-env.sh  lib      LICENSE.txt  README.txt  share

     ⑤mkdir tmp(在hadoop-2.9.2目录下创建tmp文件夹)
     ⑥vim core-site.xml 
           在之前hadoop文件配置的基础上加上这些配置!!!
                     
                     
                                  hadoop.tmp.dir
                                  /usr/app/hadoop-2.9.2/tmp
                     

     ⑥vim hdfs-site.xml
             末尾加上这些配置!!!
             
                     
                     
                               dfs.replication
                               1
                     

               
      ⑦ls tmp/(在hadoop-2.9.2目录下操作该指令)
                 将出现dfs!
      ⑧bin/hdfs namenode -format(格式化:在hadoop-2.9.2目录下操作该指令)
      ⑨sbin/start-dfs.sh(重启)
      ⑩jps
        出现下列东西说明了!!!!!
          2764 SecondaryNameNode
          2604 DataNode
          1149 WrapperSimpleApp
          2877 Jps
          2478 NameNode

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/351964.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号