一、项目背景与需求
### --- 项目背景
~~~ 随着互联网的发展,数据的时效性对企业的精细化运营越来越重要, 商场如战场,
~~~ 在每天产生的海量数据中,如何能实时有效的挖掘出有价值的信息,
~~~ 对企业的决策运营策略调整有很大帮助。
~~~ 此外,随着 5G 技术的成熟、广泛应用, 对于互联网、物联网等数据时效性要求非常高的行业,
~~~ 企业就更需要一套完整成熟的实时数据体系来提高自身的行业竞争力。
### --- 随着数据时效性在企业运营中的重要性日益凸现,例如:
~~~ 实时推荐;
~~~ 精准营销;
~~~ 广告投放效果;
~~~ 实时物流。
~~~ 数据的实时处理能力成为企业提升竞争力的一大因素,
~~~ 最初阶段企业主要采用来一个需求,编写一个实时计算任务的方式来处理实时数据,
~~~ 随着需求的增多,计算任务也相应增多,并且不同任务的开发人员不同,
~~~ 导致开发风格差异化,该阶段的实时数据处理缺乏统一的规划,代码风格差异化严重,
~~~ 在维护成本和开发效率上有很大障碍。
~~~ 为避免上述问题,人们参照数据仓库的概念和模型来重新规划和设计实时数据处理,
~~~ 在此基础上产生了实时数据仓库(实时数仓)。
Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of life.It sinks, and I am ready to depart
——W.S.Landor