栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 云计算 > 云平台

Hadoop--02---HDFS、YARN、MapReduce 概述

云平台 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

Hadoop--02---HDFS、YARN、MapReduce 概述

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档

文章目录
  • HDFS、YARN、MapReduce 概述
    • 1.HDFS架构概述
      • Hadoop Distributed File System,简称HDFS,是一个==分布式文件系统==。
    • 2.YARN 架构概述
      • Yet Another Resource Negotiator 简称YARN ,另一种资源协调者,是Hadoop 的==资源管理器==。
    • 3.MapReduce 架构概述
      • MapReduce 将计算过程分为两个阶段:Map 和Reduce
      • 1)Map 阶段==并行处理输入数据==
      • 2)Reduce 阶段对Map ==结果进行汇总==
    • 4.HDFS、YARN、MapReduce 三者关系
  • 大数据技术生态体系
    • 图中涉及的技术名词解释如下:
    • 推荐系统框架图


HDFS、YARN、MapReduce 概述

1.HDFS架构概述
Hadoop Distributed File System,简称HDFS,是一个分布式文件系统



2.YARN 架构概述
Yet Another Resource Negotiator 简称YARN ,另一种资源协调者,是Hadoop 的资源管理器

3.MapReduce 架构概述
MapReduce 将计算过程分为两个阶段:Map 和Reduce 1)Map 阶段并行处理输入数据 2)Reduce 阶段对Map 结果进行汇总

4.HDFS、YARN、MapReduce 三者关系

大数据技术生态体系

图中涉及的技术名词解释如下:



推荐系统框架图

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/895914.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号