栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

hadoop安装步骤简述(hadoop安装详细步骤window)

hadoop安装步骤简述(hadoop安装详细步骤window)

前提Java已经安装 安装准备

下载链接:链接

解压

将hadoop 到自己想要解压的路径下(这我解压到D盘下)
修改配置文件

    进入etc/hadoop/下修改 core-site.xml,hdfs-site.xml,mapred-site.xml,yarn-site.xml
core-site.xml

	
	    fs.default.name
	  hdfs://localhost:9000
	 
	 
	  hadoop.tmp.dir
	  /D:/hadoop-3.3.2/data/tmp
	 


hdfs-site.xml


    
	   dfs.replication
	   1
    
    
        dfs.namenode.name.dir
        /D:/hadoop-3.3.2/data/namenode
    
   	
        dfs.datanode.data.dir
        /D:/hadoop-3.3.2/data/datanode
    
	
     
      dfs.permissions 
      false 
    

mapred-site.xml

 
       mapreduce.framework.name
       yarn
   

yarn-site.xml

    
    	yarn.nodemanager.aux-services
    	mapreduce_shuffle
   
   
      	yarn.nodemanager.auxservices.mapreduce.shuffle.class  
		org.apache.hadoop.mapred.ShuffleHandler
   

    
        yarn.nodemanager.resource.memory-mb
        1024
    
    
        yarn.nodemanager.resource.cpu-vcores
        1
    


    修改 workers 为 localhost修改hadoop-env.cmd

set JAVA_HOME=D:javajdkjdk11

替换lib目录下的文件


如果您双击 winutils.exe 文件闪退,不报错,就说明没有任何问题

配置hadoop环境变量

格式化hadoop

打开命令行窗口
输入:hadoop namenode -format 看到成功的单词即可

进入hadoop的sbin目录执行start-all.cmd 没有报错后进入hadoop下的bin目录执行


看到这三个进程即可

访问web页面

hadoop3.2以上的版本 web访问端口从原来的 50070 改为了 9870

http://localhost:9870/

http://localhost:8088/


至此hadoop3.2.2版本 已完成

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/771740.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号