实时数仓：滴滴的实时数仓落地实践

文章目录

• • 1. 实时数仓建设目的
  • • 1.1 解决传统数仓的问题
    • 1.2 实时数仓的应用场景
  • 2. 滴滴顺风车实时数仓建设举例
  • • 2.1 ODS 贴源层建设
    • 2.2 DWD 明细层建设
    • 2.3 DIM 层
    • 2.4 DWM 汇总层建设
    • 2.5 APP 应用层
  • 3. 顺风车实时数仓建设成果
  • 4. 实时数仓建设对数据平台的强依赖
  • • 4.1 基于 StreamSQL 的实时数据需求开发
    • 4.2 基于数据梦工厂的 StreamSQL IDE 和任务运维
    • 4.3 基于数据梦工厂的实时数据源元数据化(meta 化表)
  • 5. 面临的挑战和解决方案思考
  • • 5.1 实时数仓研发规范
    • 5.2 离线和实时数据一致性保证