早前  ，2022年个推TechDay"治数训练营"系列直播课第三期圆满举办。个推资深大综合数据研发工程师为小伙伴们深入浅出地补充介绍了综合数据仓库的前世今生另一多个方面综合数据建模的用得不同方式。

本文对"治数训练营"第三期《综合数据仓库与维度建模》的干货其它内容开展了总结  ，另一多个方面也挑选了直播介于精彩提问要做Q&A梳理  ，带小伙伴们一起学习 回顾首期课程。

01综合数据仓库快速入门

综合数据仓库（Data Warehouse）  ，简称"数仓"  ，而大综合数据从业者绕不开的另目前仍然概念。"综合数据仓库之父"Bill Inmon最早其问题提出数仓的概念  ，看来"综合数据仓库是另目前仍然面向主题的、集成的、也很稳定的、反映史中显著变化的综合数据集合  ，用于鼓励管理决策"。

另一多个方面  ，大综合数据架构专家Ralph Kimball在《The Data Warehouse Tookit》一书中  ，也对数仓开展了定义："综合数据仓库是另目前仍然将源运行系统综合数据抽取、清洗、规格化 ，直到提交到维度综合数据存储的运行系统  ，为决策的制定应用提供查询和综合分析相关联功能的支撑和继续完成"。

Bill Inmon对数仓的定义更强调整体感觉特性 ，Ralph Kimball不仅从开展流程整体感觉来定义数仓。论是是谁定义  ，小伙伴们 总能从中都知道 其它企业建设中综合数据仓库的意义重大。其它企业开展建设中数仓 ，另一多个方面也也还要以将分散在各业务运行系统的综合数据开展集中化管理  ，打破综合数据孤岛；也也还要以为后续高效综合分析和应用综合数据  ，开展大综合数据赋能业务迅速发展奠定做基础。

02数仓建设中与综合数据建模

很也还要 ，其它企业如何才能建设中综合数据仓库？如何才能建设中另目前仍然贴合业务得到产品需求的、高效、稳定、好传统做法做法过综合数据仓库？目前仍然也也还要重要决定综合数据模型的选择选择和综合数据建模的解决好。

"综合数据建模"是指对实体另一多个方面实体和实体介于的介于开展综合数据化描述和抽象的积累过程。"综合数据模型"  ，不仅指参与组织和存储综合数据的不同方式。

目前仍然主流的综合数据建模不同方式有两种 ，其中前前是范式建模和维度建模：

范式建模

范式建模由Bill Inmon其问题提出  ，指站在高处 其它企业整体感觉面向主题的抽象  ，小伙伴们 大多说来开展E-R实体介于模型将事物抽象为"实体""属性""介于"  ，整体感觉来事物和事件关联。范式建模并非开展某个根据地业务流程中实体对象介于的抽象 ，它也也还要建模人员全面地、整体感觉地深入补充介绍其它企业的业务和综合数据 ，另一多个方面开展周期长  ，对建模人员的决策能力 其问题提出也也很高。

维度建模

维度建模由Ralph Kimball其问题提出 ，主张从综合分析决策的得到产品需求出发构建模型 ，为综合分析得到产品需求服务产品。很也还要它重点关注中如何才能开展户更快速地继续完成综合数据综合分析 ，另一多个方面保持良好较不好大规模复杂查询的响应性能。较之范式建模  ，维度建模建设中周期短 ，鼓励敏捷迭代  ，大多说来只会对数仓架构要做多复杂的部分传统做法做法。

在构建数仓时  ，小伙伴们 要根据实际根据地的综合数据综合分析场景和业务处理方法运行系统来选择选择相关联的综合数据建模不同方式。也还要 ，就OLTP运行系统（On-line Transaction Processing：联机事务处理方法）对于  ，不仅其原因是面向随机读写的综合数据各种操作 ，关注中事务的处理方法  ，很也还要小伙伴们 更多推荐开展OLTP运行系统及传统做法综合数据库的其它企业开展范式建模的不同方式来部分传统做法做法综合数据模型  ，以解决好在事务处理方法中则 综合数据冗余是一致性解决好。而OLAP运行系统（On-line Analytical Processing ：联机综合分析处理方法）面向批量读写综合数据的各种操作  ，关注中中事务处理方法一致性  ，原因是关注中综合数据的整合另一多个方面大综合数据查询和处理方法中则 性能  ，很也还要大多说来传统做法做法维度建模的不同方式。

根据地如何才能开展范式建模和维度建模呢？小伙伴们 自身特点案例其中前前整体感觉。

03范式建模不同方式及实例剖析

唯一整体感觉范式建模的几乎积累过程。

在开展范式建模时  ，小伙伴们 大多要遵从相相同规范其问题提出部分传统做法做法出合理的模型  ，目前仍然相相同规范其问题提出目前仍然"范式"。目前仍然新兴行业 中存这一范式、二范式、三范式等相相同模型建设中规范。越高的范式带来震撼的综合数据库冗余越小  ，目前仍然在综合数据计算多个方面会更复杂。其它企业大多说来传统做法做法三范式建模 ，在充分保证灵活度另一多个方面综合数据计算其速度的另一多个方面  ，降低综合数据处理方法的复杂度。

范式建模的积累过程也也还要以被拆解为如下四步：

1. 抽象出主体

2. 梳理主体介于的介于

3. 梳理主体的属性

4. 画出E-R介于图

也还要 ，小伙伴们 要开展范式建模的利用部分传统做法做法某课程管理运行系统的综合数据模型。

该运行系统原因用得管理某该校 部分学生、该校 和课程等息息相关联综合数据  ，涉及课程选修、考试成绩排名、部分学生授课、该校 班级等多个方面。好吧们唯一要梳理出实体  ，为部分学生、课程、该校 、班级；多个方面梳理出实体介于的介于  ，另有另有 部分学生讲授课程、该校 选修课程、该校 隶属班级等；直到要罗列出各实体和介于的属性  ，也还要"该校 "另目前仍然实体的属性有姓名、性别、年龄等  ，"该校 选修课程"另目前仍然介于的属性有选修时间时间间、总课时等；第三步 ，不仅画出E-R图 ，用矩形看来"实体" ，用菱形看来"介于"  ，用椭圆形看来"属性" ，以可视化的利用清晰展示出主体和主体介于的介于。

04维度建模不同方式及实例剖析

较之范式建模  ，维度建模稍为复杂 ，另有另有 事实表和维度表两块其它内容。

事实表

唯一看事实表。事实表分三种  ，另有另有 事务性事实表、周期性快照事实表、累计快照事实表。

• 事务性事实表大多说来用这条记录看来某个时间时间间点存要做基础发生件事件或行为规定 。也还要电商业务场景中则 订单支付业务  ，大多说来就传统做法做法事务性事实表来参与组织和存储综合数据。

• 周期性快照事实表这这条记录描述的不仅另目前仍然实体是一一段时间时间间内的状况或现状  ，也还要某顾客每月的积分余额就应该这条应该的周期性快照事实表记录。

• 累计快照事实表这这条记录不仅对某业务流程中存要做基础发生的多个事件的累计记录  ，大多说来是目的得到产品需求某个流程节点运转效率的统计得到产品需求。

小伙伴们 以另目前仍然事务性事实表的部分传统做法做法积累过程为例来深入补充介绍事实表的部分传统做法做法不同方式：

1. 选择选择与综合数据综合分析得到产品需求息息息息相关联的业务积累过程。"业务积累过程"是指在业务流程中则 可拆分的行为规定 事件。也还要  ，电商业务场景下  ，购物的业务流程中就另有另有 加购、下单、支付、商家发货、从用户 根据收货等业务积累过程。好吧们要综合分析销售额  ，那"支付"目前仍然必选的业务积累过程。

2. 声明粒度。小伙伴们 要尽量选择选择最细粒度  ，精根据地义事实表的所大多行所看来的业务含义 ，以充分保证事实表有唯一的灵活性。也还要 ，从用户 很也还可在另目前仍然订单在里面准备购买多个商品 ，那所大多准备购买一商品目前仍然另目前仍然子订单  ，小伙伴们 大多说来选择选择将子订单这是 声明粒度。

3. 根据地维度。维度是指业务积累积累过程处的小环境数据信息  ，也还要从用户 是一个时间时间间准备购买一某个店铺的某个商品  ，那店铺所属新兴行业 、商品所在类目等均也也还要以被看来是维度。

4. 根据地事实  ，即根据地业务积累过程的度量指标。也还要"支付"另目前仍然业务积累过程的度量指标为支付金额  ，更复杂的电商业务场景下  ，很也还要还另有另有 分摊邮费、折扣金额等指标。

也也还要综上所述不仅  ，所大多综合数据仓库都主要包括另目前仍然也也还要多个事实表  ，事实表是对综合分析主题的度量  ，它主要包括了与各维度表息息息息相关联的外键  ，并开展Join利用与维度表关联。

维度表

维度表不仅从用户 综合分析综合数据的窗口  ，记录了事实表中息息相关联事务、事件的属性及属性含义。

维度表的部分传统做法做法积累过程 ，原因分为如下四步：

1. 选择选择维度。也还要要生成另目前仍然商品维度表  ，好吧们选择选择的维度目前仍然商品维度。

2. 根据地主维表。也还要要建商品维度表  ，那主维表目前仍然图片频道于业务运行系统的商品表。

3. 根据地息息相关联维度表。主维表根据地直到 ，也还要的息息相关联维度表目前仍然随之根据地。也还要商品维度表的息息相关联维度表有商品类目表、所属产品品牌表、商品所属新兴行业 表等。

4. 根据地维度属性。目前仍然属性大多说来图片频道于主维表和息息相关联维表。小伙伴们 将主维表和息息相关联维表的属性集成  ，开展相同属性合并（也还要  ，商品类目表和所属产品品牌表中很也还要总能大幅属新兴行业 属性 ，好吧们就也也还要以对所属新兴行业 另目前仍然属性开展合并）  ，直到将然而继续得到的属性放到要生成的维度表里。

另一多个方面  ，本期个推TechDay"治数训练营"还对范式建模与维度建模的几乎原则、建模中则 常见解决好（也还要范式建模中则 传递依赖解决好、维度建模中则 缓慢显著变化维解决好等）、数仓分层等开展了根据地阐述 ，欢迎关注中个推其技术实践公众号  ，Get直播回放完整视频！

更多推荐书目

当另目前仍然公司存要做基础在战略上重要决定做云计算而大综合数据服务产品后  ，如何才能将该战略开展逐步分解  ，然而落地开展？这另有涉及其技术构建、运营管理、参与组织决策能力 建设中等一系列现场参与组织 ，有哪些人不同方式论和实践可供借鉴？都都知道本书带来震撼您带来震撼灵感！

关注中个推其技术实践微信公众号  ，后台回复"数仓"  ，获取本期直播课件~