栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

97.HDFS文件系统挂载

97.HDFS文件系统挂载

97.1 演示环境介绍

CM和CDH版本:5.11.2 97.2 操作演示

NFS GateWay服务安装

管理员账号登录CM,进入HDFS服务实例界面,添加角色实例,选择新添加的NFS GateWay服务并启动

Linux下挂载NFS文件系统

Fayson选择集群任意节点(ip-186-31-21-45.ap-southeast-1.compute.internal)进行NFS挂载登录186.31.21.45服务,安装NFS依赖包

[ec2-user@ip-186-31-21-45 ~]$ sudo yum -y install nfs-utils*

创建本地NFS挂载目录

[ec2-user@ip-186-31-21-45 ~]$ sudo mkdir /hdfs_nfs_mount

在命令行执行如下命令挂载NFS文件系统

[ec2-user@ip-186-31-21-45 ~]$ sudo mount -t nfs -o vers=3,proto=tcp,nolock ip-186-31-26-80.ap-southeast-1.compute.internal:/ /hdfs_nfs_mount

自动挂载NFS文件系统

编辑/etc/fstab文件,在文件最后行增加如下配置

[ec2-user@ip-186-31-21-45 ~]$ sudo vim /etc/fstab #
# /etc/fstab
# Created by anaconda on Tue Oct 25 15:56:15 2016
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
# UUID=d8048d39-5ce3-4cdf-9115-416a99b36906 / xfs     defaults 0 0 ip-186-31-26-80.ap-southeast-1.compute.internal:/ /hdfs_nfs_mount nfs     defaults 0 0

重启OS后查看是否挂载成功

验证NFS挂载

进入/hdfs_nfs_mount目录,列出HDFS根目录下所有的文件

[ec2-user@ip-186-31-21-45 ~]$ cd /hdfs_nfs_mount/
[ec2-user@ip-186-31-21-45 hdfs_nfs_mount]$ ll

使用ec2-user用户向本地文件系统/hdfs_nfs_mount/fayson目录拷贝文件

[ec2-user@ip-186-31-21-45 ~]$ cp fayson.keytab /hdfs_nfs_mount/fayson/
[ec2-user@ip-186-31-21-45 ~]$ ll /hdfs_nfs_mount/fayson/
total 28181
-rw------- 1 ec2-user 2584148964      514 Dec 27 08:39 fayson.keytab
-rw-r--r-- 1 ec2-user 2584148964 28855325 Oct  3 10:28 item.csv
[ec2-user@ip-186-31-21-45 ~]$ 

查看HDFS文件系统的/fayson目录

大数据视频推荐:
CSDN
大数据语音推荐:
企业级大数据技术应用
大数据机器学习案例之推荐系统
自然语言处理
大数据基础
人工智能:深度学习入门到精通

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/721440.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号