[ 数据仓库 ]
[ (思维导图) ] (5614)
－隐藏－
- 产生背景
- 基本概念
- 主要特点
- 数仓和数据库对比
- 技术架构介绍
- 传统数仓
- 大数据数仓
- 技术架构
- MPP架构
- 分布式架构
- MPP架构+分布式架构
- 技术选型 - 工具产品
- 建模理论
- ER模型 - 实体关系模型
- 关系模型
- 维度模型
- 数据库规范化
- 范式理论
- OLTP系统建模 - 在线事务处理
- OLAP系统建模 - 在线分析处理
- ROLAP (Relation OLAP) 关系型OLAP
- MOLAP (Multidimensional OLAP) 多维型OLAP
- HOLAP (Hybrid OLAP) 混合架构OLAP
- 建模方法
- 建模步骤 - ER建模
- ER建模方法
- Data Value
- Anchor
- 维度建模方法
- 事实
- 事实表
- 事务事实表
- 周期快照事实表
- 设计流程
- 度量值类型/事实类型
- （所有维度）可加事实
- （部分维度）半可加事实
- （全部维度）不可加事实
- 累积快照事实表
- 设计流程
- 无事实事实表
- 维度
- 粒度
- 建模模式
- 宽表模型
- 数仓分层
- ETL (Extract-Transform-Load)
- ODS (Operational Data Store) 原始层
- CDM层 公共维度模型层
- DIM (Dimension) 维度层
- DW (Data Warehouse) 数仓层
- DM (Data Market) 数据集市层
- ADS (Application Data Store) 数据应用层
- 数仓分类
- 数据湖
- 开发框架
- 数仓架构
- 数仓构建流程
＋展开＋
＋展开＋
＋展开＋
＋展开＋
＋展开＋
关系型数据库组成的MPP(大规模并行处 ...
分布式文件系统，海量数据存储集群。将S ...
＋展开＋
传统数仓中的常见技术架构，将单机数据库 ...
＋展开＋
大数据采用分布式架构：Hadoop架构 ...
数据存储采用分布式架构，提高分区容错性 ...
＋展开＋
＋展开＋
基本元素：实体、联系和属性。实体：是一 ...
用二维表的形式表示实体和实体间联系的数 ...
维度模型是数据仓库领域大师Ralph ...
使用一系列范式设计数据库的过程。目的是 ...
＋展开＋
主要是随机读写操作。使用ER模型，保证 ...
主要是复杂查询分析，关注数据整合、分析 ...
＋展开＋
使用关系模型建模，存储为RDBMS。依 ...
预先聚合计算，使用多维数组保存数据，提 ...
是ROLAP和MOLAP的混合结构。底 ...
＋展开＋
＋展开＋
使用实体关系模型来描述企业业务，使用规 ...
＋展开＋
由ER模型衍生而来。
由Data Value衍生而来。
通过事实和维度进行呈现，事实对应业务过 ...
＋展开＋
＋展开＋
事实表围绕业务过程进行设计。其包含与该 ...
＋展开＋
记录各个业务过程，保存的是各个业务过程 ...
＋展开＋
以有规律、可预见的时间间隔（固定周期） ...
＋展开＋
＋展开＋
此处事实类型指度量值类型。
＋展开＋
按照与事实表相关的所有维度进行累加。 ...
按照与事实表相关的部分维度进行累加。 ...
完全不具备可加性。但可以转化为可加事实。 ...
指基于一个业务流程中的多个关键业务过程 ...
＋展开＋
＋展开＋
＋展开＋
数据汇总范围的度量。
＋展开＋
是维度模型的衍生，适合join性能效率 ...
＋展开＋
用来描述将数据从来源端经过抽取（ext ...
＋展开＋
存放未经过处理的原始数据，结构上与源系 ...
＋展开＋
参考阿里云的数仓模型。完成历史数据分析 ...
＋展开＋
基于维度建模理论进行构建，存放维度模型 ...
＋展开＋
存放各项统计指标的结果。完成分析结果数 ...
＋展开＋
＋展开＋
Hudi、Iceberg、Delta ...
＋展开＋
＋展开＋
链接：