栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

HDFS

HDFS

HDFS_08_机架感知策略

持续更新大数据文章…

1. 机架感知策略 1.1 什么是机架感知策略?

机架感知策略就是:数据块以及数据块副本存放在哪个 DN 上才能让集群更加安全、数据更不容易损坏的一种策略。

举个例子:如果没有机架感知策略,一个文件的数据块以及该数据块的副本可能会存储在同一个DN上,这显然是不安全的。因为有了机架感知策略的存在,一个文件的数据块以及该数据块的副本就不会存储在同一个DN上,从而保证数据的安全性

1.2 机架感知如何工作?
  • 第一个节点
    • 集群内部(优先考虑和客户端相同节点作为第一个节点)
    • 集群外部(选择资源丰富且不繁忙的节点为第一个节点)
  • 第二个节点
    • 选择和第一个节点不同机架的其他节点
  • 第三个节点
    • 与第二个节点相同机架的其他节点
  • 第N个节点
    • 与前面节点不重复的其他节点





下期讲解 HDFS_09_HDFS数据写入流程......

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/653922.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号