栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

2022-01-13shopee金融大数据产品面试经验

2022-01-13shopee金融大数据产品面试经验

首先是自我介绍和项目介绍。

1、hdfs通过命令put一个文件的流程

服务端接受到写数据请求后,发送写数据请求到namenode生成元数据并写入,然后服务端根据元数据往datanode写具体的数据块。

然后被问如果写datanode失败数据不一致怎么解决,这里回答采用两阶段提交的方式去写元数据和实际数据,然后被怼那这样客户端崩了还是会存在问题。那我就说用zookeeper存储最后的数据,反正是key value的形式,然后被怼zookeeper同步效率很低。

2、讲述了一个项目,选择了数据统计分析可视化项目。

3、hbase的架构,写入数据流程

      hbase由hmaster和regionserver组成,hmaster接受

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/707356.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号