栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

Hadoop学习之HDFS基础学习

Hadoop学习之HDFS基础学习

目录

一、HDFS的java API操作准备工作

1.准备java操作环境

2.下载apach maven

a)官网下载

b)配置环境变量

c)安装成功

3.下载IDEA

二、编写Maven项目测试jdk、maven

1.新建一个HelloWorld项目

a)建立成功的主界面

​​ b)新建一个包

​ c)新建一个类

​​ d)输入代码测试

2.配置镜像maven

a)修改本机maven的settings.x文件

​ ​b)修改idea中的maven配置 

 三、实例:新建一个项目测试HDFS

1.新建maven项目

2.修改项目中的maven配置

a)修改项目中的maven镜像库​

b)修改prom文件添加依赖

​ c)新建一个包​

d)初始化客户端

3.测试虚拟机与idea的连接

a)开启虚拟机hdfs和yarn

b)运行结果查看

4.在集群上创建文件夹

5.删除文件夹

a)删除结果

6.上传文件​

 a)上传成功

7.下载文件

a)出现错误

b)添加环境变量

c)解决后重新运行


一、HDFS的java API操作准备工作

1.准备java操作环境

2.下载apach maven

a)官网下载

b)配置环境变量

c)安装成功

 

3.下载IDEA

 

 

 

二、编写Maven项目测试jdk、maven

1.新建一个HelloWorld项目

a)建立成功的主界面

 b)新建一个包

 c)新建一个类

 d)输入代码测试

开发环境搭建成功 

2.配置镜像maven

a)修改本机maven的settings.x文件

 b)修改idea中的maven配置 

 三、实例:新建一个项目测试HDFS

1.新建maven项目

a)新建成功

2.修改项目中的maven配置

a)修改项目中的maven镜像库

b)修改prom文件添加依赖

 c)新建一个包

d)初始化客户端

3.测试虚拟机与idea的连接

a)开启虚拟机hdfs和yarn

b)运行结果查看

4.在集群上创建文件夹

 

5.删除文件夹

a)删除结果

 

6.上传文件

 a)上传成功

 

7.下载文件

a)出现错误

需要在本地添加hadoop文件与环境变量

b)添加环境变量

c)解决后重新运行

结果如下

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/710728.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号