栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

hadoop安装

hadoop安装

hadoop-3.3.0.tar.gz下载地址:Index of /dist/hadoop/common/hadoop-3.3.0https://archive.apache.org/dist/hadoop/common/hadoop-3.3.0/

 

macos安装步骤:

   1)修改环境变量:

vi ~/.bash_profile

#hadoop
export HADOOP_HOME=~/Work/hadoop-3.3.0
export PATH=$PATH:$HADOOP_HOME/bin
export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export YARN_HOME=$HADOOP_HOME
export HADOOP_CLASSPATH=$JAVA_HOME/lib/tools.jar
export PATH=$JAVA_HOME/bin:$HADOOP_HOME/bin:$PATH 
#java
export JAVA_HOME="/Library/Java/JavaVirtualMachines/jdk1.8.0_111.jdk/Contents/Home"
export JRE_HOME="$JAVA_HOME/jre"
export CLASSPATH=.:$JAVA_HOME
export PATH=$PATH:/Users/wisdom_leo/Library/Tomcat/bin:$JAVA_HOME/bin:$JRE_HOME/bin
export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export LD_LIBRARY_PATH=/Library/Java/Extensions

     2)修改配置文件:hadoop-3.3.0/etc/hadoop

hadoop-env.sh

core-site.xml

hdfs-site.xml

mapred-site.xml

yarn-site.xml

     3)启动应用。hadoop-3.3.0/sbin

在mac的系统偏好设置-->共享中打开远程登录

./hdfs namenode -format 

./start-dfs.sh 

jps观察应用是否成功启动

     4)查看namenode。在浏览器上输入http://localhost:9870/dfshealth.html#tab-overview

     5)工程引入jar,jar路径:hadoop-3.3.0/share/hadoop

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/303507.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号