【大厂架构师知识梳理】剖析及实践主数据管理系统【共20课时】_大数据系统课程-51CTO学堂
ad
close

【大厂架构师知识梳理】剖析及实践主数据管理系统

系统化理解主数据管理系统解决方案、规划主数据管理系统、能够实施主数据项目

865人学习

中级20课时2024/03/08更新

二维码下载学堂APP缓存视频离线看

Garagong
  • 畅销套餐
  • 精选套餐
  • 人气套餐
  • 尊享套餐
  • 高薪套餐
行业级大数据应用实战(架构+平台+案例+经验)
【腾讯架构师】剖析及实践企业级大数据平台(大厂数据分析)
24319人学习
¥199.00
数据架构规划设计
4050人学习
¥49.00
【大厂架构师知识梳理】剖析及实践数据资产运营平台
847人学习
¥29.00
更 多 5 门 课 程
GoldenGate+ETL/Kettle专题(92个项目)
GoldenGate数据库容灾迁移01(OGG同构异构、数据库迁移、数据同步、容灾复制)
197771人学习
¥998.00
GoldenGate数据库容灾迁移02(OGG同构异构、数据库迁移、数据同步、容灾复制)
48978人学习
¥889.00
GoldenGate数据库容灾迁移03(OGG同构异构、数据库迁移、数据同步、容灾复制)
25672人学习
¥889.00
更 多 7 门 课 程
大数据运维架构师实战培训专题2.0
大数据运维架构师培训(1):Hadoop集群(HDFS,MR,Yarn),Zookeeper集群
87056人学习
¥499.00
大数据运维架构师培训(2):Hbase,Hive, Phoenix,Pig,Impala,Kudu
34241人学习
¥333.00
大数据运维架构师培训(3):Spark,Flink, Storm,Kafka,Solr
34308人学习
¥399.00
更 多 12 门 课 程
大数据运维工程师培训实战专题1.0(Hadoop生态圈)
大数据运维架构师培训(1):Hadoop集群(HDFS,MR,Yarn),Zookeeper集群
87056人学习
¥499.00
大数据运维架构师培训(2):Hbase,Hive, Phoenix,Pig,Impala,Kudu
34241人学习
¥333.00
大数据运维架构师培训(3):Spark,Flink, Storm,Kafka,Solr
34308人学习
¥399.00
更 多 5 门 课 程
大数据运维工程师培训实战专题1.0(Hadoop生态圈)
大数据运维架构师培训(1):Hadoop集群(HDFS,MR,Yarn),Zookeeper集群
87056人学习
¥499.00
大数据运维架构师培训(2):Hbase,Hive, Phoenix,Pig,Impala,Kudu
34241人学习
¥333.00
大数据运维架构师培训(3):Spark,Flink, Storm,Kafka,Solr
34308人学习
¥399.00
更 多 5 门 课 程
  • 课程介绍
  • 课程大纲

适合人群:

准备构建主数据的的企业人员 准备学习大数据、主数据的在校学生 准备考试DAMA证书、DCMM证书的人员

你将会学到:

系统化理解主数据管理系统解决方案、规划主数据管理系统、能够实施主数据项目

课程简介:

本人担任腾讯云大数据、人工智能解决方案架构师、数字化转型专家,原京东集团云计算架构师,拥有17年行业信息化工作经验,主要负责能源行业、政府单位的大数据、人工智能解决方案设计及项目落地,同时也帮助多家央企编制数字化转型方案。在京东就职期间,担任京东云计算架构师,带领私有云团队,共同设计京东云产品,并助力京东云产品在铁道部完成第一单落地。本大擅长大数据、系统分析、云计算、人工智能、数字化转型等领域,期望通过系统化整理自己所学知识和经验,形成录播课件,助力信息化工作人员度过经济萧条期,能力更上一层楼。

 结合我多年大数据、主数据实施经验和知识积累,给大家分享主数据管理系统解决方案。让您全面熟悉主数据管理系统如何构建、注意事项、市面上主数据管理系统功能架构是什么?主要的功能有哪些?企业构建主数据管理系统带来什么好处?也能让您秒变主数据工程师。

课程目录如下:

1.课程介绍

2.1讲:知识框架介绍

3.2讲:什么是主数据、主数据管理

4.3讲:主数据管理、主数据全生命周期

5.4讲:从系统层面分析企业为什么要上主数据

6.5讲:以实例讲解无序的主数据服务带来的挑战

7.6讲:从数据层面分析企业为什么要上主数据

8.7讲:以实例讲解,主数据完整性问题以及问题总结

9.8讲:主数据建设整体思路

10.9讲:主数据管理系统整体架构

11.10讲:主数据管理系统功能架构

12.11讲:主数据范围及统一编码管理

13.12讲:主数据维护方式

14.13讲:主数据采集及清洗

15.14讲:主数据同步、分发与集中监控

16.15讲:主数据管理体系、标准、流程

17.16讲:成熟的主数据管理系统功能架构及主流程

18.17讲:主数据系统模型管理

19.18讲:主数据维护与质量管理功能分析

20.19讲:主数据集成和统计分析功能分析

21.20讲:主数据价值及作用

展开更多

课程大纲-【大厂架构师知识梳理】剖析及实践主数据管理系统

  • 1

    知识框架介绍讲解个人履历、本课程面向的人群、您获得什么、以及整体知识框架。

    「仅限付费用户」点击下载“剖析及实践主数据管理系统-gara-20240301.pdf”

    [05:23]
  • 2

    什么是主数据、主数据管理以一个示例讲解主数据,主数据( Master Data )是在多系统集成应用的背景下,被多个信息系统(或功能模块)共用的基础性标准化的数据,常见的主数据包括:供应商、客户、物料、人员、部门、项目等。

    [08:48]
  • 3

    主数据管理、主数据全生命周期主数据管理主要包括编码标准、静态数据字典标准、主数据模型标准、主数据标准定义、主数据集成规划;主数据全生命周期管理流程:主数据获取、管理、应用、归档。

    [12:58]
  • 4

    从系统层面分析企业为什么要上主数据企业目前在系统层面面临着三大问题:系统独立、数据孤岛、应用分散,不仅要实现纵向的信息管理,还需要实现横向的集成协同。

    [19:39]
  • 5

    以实例讲解无序的主数据服务带来的挑战以某地产公司现有的应用系统,主数据分散的现状讲解不受管理的接口调用形成了一张无序的网,对系统集成造成较大的困难和工作量。

    [10:22]
  • 6

    从数据层面分析企业为什么要上主数据企业在数据层面面临着四大问题:主数据定义、标准不明确、缺乏有效共享、数据管理流程不统一、未建立相应的组织保障,需要构建主数据,实现主数据统一管理,统一服务共享。

    [10:33]
  • 7

    以实例讲解,主数据完整性问题以及问题总结以客户主数据为实例讲解,分散在不同应用系统中,客户的属性信息不完整,另外从系统层面、数据层面做了问题总结,结论是需要建设主数据管理系统,系统性的去规划和实现主数据。

    [11:08]
  • 8

    主数据建设整体思路整体思路:从多个业务系统中整合最核心的、需要共享并保持一致的数据(主数据),解决“信息孤岛”的问题;集中进行主数据的采集和清洗;以服务的方式把统一、完整、准确的主数据分发给企业范围内需要使用这些数据的业务系统、业务流程和决策支持系统。

    [07:00]
  • 9

    主数据管理系统整体架构确定主数据来源的权威系统、以主数据管理系统为集中管理,对外分发主数据,满足其它业务应用系统对主数据的需求。

    [06:01]
  • 10

    主数据管理系统功能架构主数据管理系统功能架构分为基础功能和应用功能,其中应用功能分为五大类:主数据存储、整合、清洗、治理、共享。

    [10:09]
  • 11

    主数据范围及统一编码管理为了加强对主数据的管控和治理,将主数据按人、财、物、组织、项目和分业务板块几大类制定统一规范,分类管理。主数据管理系统将编码进行详细划分,通过编码引擎实现统一编码。

    [12:13]
  • 12

    主数据维护方式主数据维护方式常用的包括集中维护和分散维护,主数据集中维护,各应用不再变更主数据,都引用同一份主数据;主数据分散维护,各应用系统有权变更主数据,主数据平台解决冲突,维护数据一致性。

    [06:43]
  • 13

    主数据采集及清洗主数据采集包括多数据源适配器、多种采集策略、引用预定义映射转换规则、规则自动校验;主数据清洗按照质量规则定义清洗主数据。

    [09:02]
  • 14

    主数据同步、分发与集中监控主数据通过ESB、消息队列的方式实现主数据同步与分发;主数据通过主数据管理系统实现安全控制、版本控制、过程审计。

    [03:52]
  • 15

    主数据管理体系、标准、流程主数据管理标准和规范制定的目的在于为系统间整合提供数据基础、提高数据质量和促进数据的共享。数据管理标准和规范是指为各业务及系统所共享的数据(含主数据)而制订的统一数据接入标准和规范。

    [09:20]
  • 16

    成熟的主数据管理系统功能架构及主流程市面上成熟主数据管理系统功能主要包括:模型管理、数据质量、数据维护、数据集成、统计分析及系统管理。主数据管理系统主流程:以主数据管理工具为主数据源头系统,对主数据进行统一集中管理,为主数据消费系统提供主数据服务。根据公司实际情况和具体需求,如果某类主数据的源头为第三方系统,通过系统集成对接第三方系统可以向主数据管理工具发送主数据,纳入主数据管理工具统一集中管理。

    [13:14]
  • 17

    主数据系统模型管理通过模型管理功能,在可视化模型管理页面,可以定义主数据对象、创建主数据模型,进行主数据模型的维护,属性设置、参照设置等,能够对主数据模型进行保存、启用、发布的管理。

    [05:29]
  • 18

    主数据维护与质量管理功能分析通过主数据维护功能,进行主数据的新增、修改、导入、封存、解封等操作。主数据维护需要按照已配置的主数据审批流程进行审批;通过清洗建模、清洗规则功能,进行主数据的质量校验规则的设置,内置空值、值域、逻辑等质检规则,并支持自定义脚本。可通过组合不同的规则形成质检方案,以任务调度的形式定期检查,形成质检报告。

    [05:08]
  • 19

    主数据集成和统计分析功能分析通过主数据集成功能,将主数据工具与主数据的源头生产系统、主数据的消费系统进行集成对接,从而实现主数据接收、主数据分发功能。通过主数据授权订阅功能,支持对外提供主数据管理接口,包括主数据查询、申请、修改、冻结、解冻、失效等接口,针对第三方系统,提供在线订阅功能。通过主数据的统计分析功能,可以对各类主数据从多个维度进行统计分析。

    [05:45]
  • 20

    主数据价值及作用主数据管理是一种集成的、完整的企业级主数据管理平台,具有企业级主数据存储、主数据整合、主数据清洗、主数据监管以及主数据共享等五大功能,可全面连接企业数据内容和实现企业范围内的主数据统一、完整和一致;通过主数据管理,提高数据协同,提升企业洞察及运营效率

    [08:24]
close
  • 课程介绍
  • 课程大纲
在线
客服
APP
下载

下载Android客户端

下载iphone 客户端

官方
微信

关注官方微信

返回
顶部