栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

复习Hive之基本概念

复习Hive之基本概念

Hive是什么

hive是基于Hadoop的一个数据仓库工具,能够将结构化的数据映射成为一张表,提供类SQL的查询
本质是转化成mapReduce程序

为什么使用Hive
    简单容易上手对实时性要求不高的时候使用适合处理大数据可以自定义函数
架构


由上图可以看出一共由5个部分组成,Mapreduce和HDFS可以归属于Hadoop

    Clientmeta Store:表名、表所属的数据库(默认是default)、表的拥有者、列/分区字段、表的类型(是否是外部表)、表的数据所在目录等Driver:

    解析器优化器编译器执行器 Hadoop:Hdfs用于存储,MapReduce用于计算

运行机制

hive接收到SQL语句,使用自己的Driver并结合元数据,将SQL翻译成mapReduce,提交到Hadoop中执行,最后将结果返回

Hive和数据库有哪些区别
    数据存储位置:Hive是存储在HDFS上面,而其他数据库的存储位置一般为磁盘Hive不支持数据的修改 比如insertHive没有索引数据库有自己的执行引擎,而Hive是转成MapReduce数据规模,HIve支持大数据HIve是建立在Hadoop之上的,所以Hadoop的可扩展性Hive同样拥有
转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/746937.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号