栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

windows hadoop3.x idea二次开发环境搭建

windows hadoop3.x idea二次开发环境搭建

效果图


源码下载地址
hadoop地址
碰到的第一个问题

解决方法

碰到的第二个问题

解决方案:



碰到的第三个问题
这个就需要安装(这个我会上传到百度云里稍后发布,这个也是某个大佬里视频发的)
链接:https://pan.baidu.com/s/1zWFcAOKV5wCv_n70iRjHyw
提取码:f4fo

具体配置是在编译windows版本中的这个问的那个
安装完后
然后进入到缺包的子模块下的proto目录下,执行转换proto文件为java文件的命令即可。

例如:
执行命令: cd hadoop-common-project/hadoop-common/src/main/proto/
执行命令: protoc --java_out=…/java *.proto

我执行的该命令不止一处,所以需要各位大佬看看

碰到的第四个问题(忘记截图了)
org.apache.hadoop.io.serializer.avro.TestAvroSerialization
解决方法
下载avro-tools-1.7.4.jar
进入目录hadoop-common-projecthadoop-commonsrctestavro
执行 java -jar 下载目录/avro-tools-1.7.4.jar compile schema avroRecord.avsc …java(输出目录)
既可以解决这个问题

具体windows编译hadoop的具体步骤也在文档里,可以瞅瞅

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/784996.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号