栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

win10中用Intellij IDEA连接虚拟机Hadoop

win10中用Intellij IDEA连接虚拟机Hadoop

win10中用Intellij IDEA连接虚拟机Hadoop 确保安装好了jdk1.8以上&maven3.0以上,hadoop

cmd命令查看

maven安装教程

hadoop文件解压,bandzip报错,所以安装winrarcmd解压:

确保hadoop正常运行:

可能报错:

Hadoop Error: JAVA_HOME is incorrectly set

在网上搜索了下资料发现原来是路径上包含了一个空格

解决办法:用路径替代符

C:PROGRA~1Javajdk1.8.0_91
PROGRA~1 ===== C:Program Files 目录的dos文件名模式下的缩写
长于8个字符的文件名和文件夹名,都被简化成前面6个有效字符,后面~1,有重名的就 2,3

准备插件文件

原地址:Github

转载[2021.12.8]:蓝奏云

编译

进到解压目录:

打开pom.xml,修改下面两处,hadoop版本号和idea安装目录

保存后进行maven编译:

本目录下打开cmd

依次执行下面操作:

mvn clean
mvn assembly:assembly

2020版本报错:

提示类文件具有错误的版本 55.0, 应为 52.0

推测是版本不匹配,降低idea版本:这里重新下载idea 2018

下载地址Other Versions - IntelliJ IDEA (jetbrains.com)

2018编译成功:

目录下出现target文件夹:

这就是我们要的插件

安装插件

成功后在导航栏看到hadoop选项

连接hdfs

把虚拟机的集群启动



如果不知道端口,打开绿色web页面找到下面的照着填就没错了(最好hdfs里面有东西,不要是空的,而且在win10能打开下买的web页面,打不开用ping检查,重启网络适配器的VMnet8可以解决大部分问题)

连接成功!

2019版本以上可以用jetb官方插件big data tools进行连接:

我参考的博客:Big Data Tools完整攻略,一键连接Hadoop_轻夏的博客-CSDN博客_big data tools

其中其他版本bin我上传到了蓝奏云:https://wwe.lanzouo.com/id8mKxf6v8d

没有对应的版本就近选择就好,我是hadoop3.1.3,用了3.1.2的bin,同样可以连接成功。

不重启刷新环境变量
set path=test
# 重启cmd
echo %PATH%
转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/650232.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号