【大厂架构师知识梳理】剖析及实践数据建模

1

知识框架介绍讲解个人履历、本课程面向的人群、您获得什么、以及整体知识框架。

2

002 什么是模型，为什么需要建模模型是指对于某个实际问题或客观事物、规律进行抽象后的一种形式化表达方式，为什么要建模：如果把数据看作图书馆里的书，我们希望看到它们在书架上分门别类地放置；如果把数据看作城市的建筑，我们希望城市规划布局合理。

3

数据建模常用术语讲解数据建模过程中常用术语，包括数据库范式、域、ERD、维度、度量、属性、主键、外键、事务、并发、数据字典、数据粒度等术语

4

数据模型分类讲解数据模型分类：概念模型、逻辑模型、物理模型，以及三者之间的关系和区别。

5

实体间的关系讲解数据模型实体之间的关系，包括包括一对一、一对多、多对多等关系，并说明各关系的概念以及应用案例。

6

OLTP与OLAP区别及关系数据处理大致可以分成两大类：联机事务处理OLTP（on-line transaction processing）、联机分析处理OLAP（On-Line Analytical Processing）。OLTP是传统的关系型数据库的主要应用，主要是基本的、日常的事务处理，例如银行交易。OLAP是数据仓库系统的主要应用，支持复杂的分析操作，侧重决策支持，并且提供直观易懂的查询结果

7

OLTP与OLAP多维度对比从用户、功能、DB设计、数据实时性、存取、工作单位、数据量、用户数、时间要求等多个方面进行分析和比较。

8

OLTP系统建模特点详细讲解OLTP系统建模特点：严谨性、一致性、灵活性、抽象性

9

以经营管理系统为例分析业务需求从用户角度如何收集业务需求、层层细化，基于需求设计数据模型以及细化库表结构和属性。

10

以经营管理系统为例分析数据建模基于业务需求，梳理业务实体以及实体之间的关系，并细化相应的属性，以物理模型的形式进行呈现。

11

以日经营彩信模块为例分析数据建模构建日经营采集模型，以业务需求为导向，结合系统设计理念，模块内高内聚，模块间低耦合，来设计数据模型。

12

OLAP系统建模特点OLAP系统建模特点分为层次化、标准化、系统化、具象化、周期化等

13

OLAP系统建模分层设计讲解分层设计五大优势：清晰数据结构、数据血缘追踪、减少重复开发、把复杂问题简单化、屏蔽原始数据的异常

14

数据仓库与数据集市的区别分别讲解数据仓库与数据集市的概念、目的以及区别

15

OLAP建模数据存储特征识别数据存储特征分为：全量数据、增量数据、累计数据

16

全量数据与累计数据分别讲解业务全量数据、事实全量数据、聚合累计数据、追加累计数据概念及场景

17

维度表设计及各层次模型的差异维度表可以看作是用户来分析数据的窗口 ，维度表中包含事实数据表中事实记录的特性 ，有些特性提供描述性信息 ，有些特性指定如何汇总事实数据表数据 ，以便为分析者提供有用的信息 ，维度表包含帮助汇总数据的特性的层次结构。

18

OLTP与OLAP建模总结总结OLTP联机事务系统、OLAP联机分析系统建模的区别及关系。