数仓数据同步策略

一、同步策略

数据同步策略的类型包括：全量同步、增量同步、新增及变化同步、特殊情况

• 全量表：存储完整的数据
• 增量表：存储新增加的数据
• 新增及变化表：存储新增加的数据和变化的数据
• 特殊表：只需要存储一次

（1）全量同步策略

说明：每天存储一份完整的数据，作为一个分区

适用场景：表的数据量不大，且每天会有新的数据插入，也会有旧的数据修改（如：品牌表、商品一二三级分类表、加购表、活动表、优惠规则表、SKU商品表、SPU商品表等）

（2）增量同步策略

说明：每天存储一份增量的数据，作为一个分区

适用场景：表的数据量大，且每天会有新数据插入的场景（如：退单表、订单状态表、支付流水表、商品评论表等）

（3）新增量及变化同步策略

说明：存储创建时间和操作时间都是今天的数据

适用场景：表的数据量大，即会有新增，又会有变化。（如：用户表、订单表、优惠价领用表等）

（4）特殊策略
一些特殊的表，比如某些不会发生变化的表，可不必遵循上述同步策略（如： 地区表，省份表，民族表等 可以只存一份固定值）

总结分析图