实时数仓：实时数据平台之设计篇

文章目录

• • 1、相关概念背景
  • • 1.1 从现代数仓架构角度看待实时数据平台
    • • 1)数据实时化（实时同步和流式处理能力）
      • 2) 数据虚拟化（虚拟混算和统一服务能力）
      • 3)数据平民化（可视化和自助配置能力）
      • 4)数据协做化（多租户和分工协做能力）
    • 1.2 从典型数据处理角度看待实时数据处理
  • 2、架构设计方案
  • • 2.1 定位和目标
    • 2.2 总体设计架构
    • • 1)统一数据采集平台
      • 2)统一流式处理平台
      • 3)统一计算服务平台
      • 4)统一数据可视化平台
    • 2.3 具体问题和考量思路
    • • 1)功能考量
      • 2)质量考量
      • 3)稳定考量
      • 4)成本考量