码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 维度建模之维度表的设计经验分享


    系列文章目录

    1. 维度建模之数据接入经验分享
      其一离线数据接入:Sqoop数据接入的经验分享和思考
      其二实时数据接入:待更新
    2. 维度建模之事实表的设计经验分享
    3. 维度建模之维度表的设计经验分享
    4. 维度建模之汇总分析表的设计经验分享
    5. 维度建模之应用层报表的设计经验分享

    文章目录

    • 系列文章目录
    • 前言
    • 一、维度表的概念
    • 二、维度表的设计
      • (一)公司内部统一维度来源及口径
      • (二)确认维度表的主数据源表
      • (三)根据需要考虑设计成星型结构或雪花结构
      • (四)保证维度表主键唯一
    • 三、参考书籍


    前言

    了解数据库的小伙伴应该都知道,数据库表的设计需要遵循范式,这主要是为了让表更加规范,减少冗余。而目前主流的数据仓库表设计方式是维度建模,为了让表使用起来更方便,通常情况下会主动引入冗余。这是数据库和数据仓库的不同之处。
    本文主要分享我在数仓开发过程中维度表的设计经验,供大家参考,如有不正确之处,请评论指正,我们共同进步。


    一、维度表的概念

    维度是维度建模的基础和灵魂。在维度建模中,将度量称为“事实”,将环境描述为“维度”,维度是用于分析事实所需要的多样环境。例如,在分析交易过程中,可以通过买家、卖家、商品和时间等维度描述交易发生的环境。

    二、维度表的设计

    (一)公司内部统一维度来源及口径

    维度的口径必须保证唯一,如果公司不同部门对同一产品的分类有不同口径,最后统计的结果肯定无法统一。

    (二)确认维度表的主数据源表

    比如产品信息维度表,应该以数据库中产品表为主数据源表,再关联产品分类等。

    (三)根据需要考虑设计成星型结构或雪花结构

    如果该维度经常被使用,建议维度关联冗余,让事实表可以直接获取多个维度形成星型模型,如果维度只被少量模型使用,可以考虑雪花模型。

    (四)保证维度表主键唯一

    必须保证维度表每行数据的唯一性,避免关联时出现一对多。

    三、参考书籍

    1. 《数据仓库工具箱(第3版)——维度建模权威指南》【美】Ralph Kimball & Margy Ross 著
    2. 《大数据之路——阿里巴巴大数据实践》阿里巴巴数据技术及产品部 著
  • 相关阅读:
    c#给多线程传参的几种方式
    Visual Studio: Arm64EC官方支持来了
    springboot websocket 客户端实现
    ts中高阶类型的理解
    ZYNQ实验--Petalinux 安装
    SCM系统是什么?供应链管理系统有哪些优势?
    Android App活动页面
    第二章:并行硬件和并行软件
    Java 浅拷贝会带来的问题
    html禁止用户复制内容方法
  • 原文地址:https://blog.csdn.net/zhangliushi/article/details/126092023
  • 最新文章
  • 沪漂五周年了:我越来越迷茫了
    Agentic Skill Routing 实战:别再把所有 Skill 塞进 AI Agent 上下文
    MySQL-Seconds_behind_master的精度误差
    [MAF预定义ChatClient中间件-03]CachingChatClient——利用缓存省钱省时间
    AI的至暗历史:从万众期待到被政府撤资,AI的两次死亡徘徊
    Agent OS :五种驯服不确定性的范式
    PortSwigger SQL注入LAB11
    数据库即时编译JIT
    [Begin]AI Learn Data Day 0
    深度学习进阶(二十七)现代 LLM 的核心架构设计其二:SwiGLU
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号