栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

Hbase的读写流程

Hbase的读写流程

一、写流程

(1) Client通过Zookeeper的调度,向RegionServer发出写数据请求,在Region中写数据。
(2) 数据被写入Region的MemStore,直到MemStore达到预设阈值。
(3) MemStore中的数据被Flush成一个StoreFile。
(4) 随着StoreFile文件的数量增多,会达到数量阈值,然后触发Compact合并操作,将多个StoreFile合并成一个StoreFile,同时进行版本合并和数据删除。
(5) StoreFiles在不断的Compact合并操作下会达到文件大小阈值,会触发Split操作,把当前Region Split成2个新的Region。父Region会下线,新Split出的2个子Region会被HMaster分配到相应的RegionServer上,使得原先1个Region的压力得以分流到2个Region上。

二、读流程

(1) client在发送读操作时,会通过寻址流程找到对应的region.
(2) 会先遍历memstore。然后查询对应的storefile文件.
(3) 如果从storefile中查询到数据,就会与从写内存中查询的数据,一起返回给客户端,同时将该文件中的查询到的数据保存读内中。以便下次访问。

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/389180.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号