栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

大数据的数据同步方式

大数据的数据同步方式

一、全量覆盖

不需要分区,同步时直接覆盖插入。适用于数据不会有任何新增和变化的情况。比如地区、时间、性别等维度数据,不会变更或变更不影响业务,可以只保留最新值

二、仅新增同步

每天新增一个日期分区,同步并存储当天的新增数据。比如登录记录表、访问日志表、交易记
录表、商品评价表等。

三、新增及更新同步

每天新增一个日期分区,同步并存储当天的新增和更新数据。适用于既有新增又有更新的数据,比如用户表、订单表等。

四、全量同步

每天新增一个日期分区,同步并存储当天的全量数据,历史数据定期删除。适用于数据会有新增和更新,但是数据量较少,且历史快照不用保存很久的情况。首次执行时都是全量同步。

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/354812.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号