大数据平台建设需求
图 大数据平台蓝图
技术先进
先进的技术能够保证整个大数据系统的稳定性与兼容性，同时能够合理利用资源，避免有限的资源浪费。集团需要建立一个结合先进技术一体化的大数据和人工智能应用基础软件平台。
自主可控
大数据是企业核心资产，应自主建设，遵循先进适用、稳定安全、灵活开放的原则设计。平台借助多租户的模式，可以满足集团及各个板块对数据和权限的管理要求，使得集团建设统一数据中台成为可能。
行业领先
依托广泛的客户群体、成熟的使用模式、多案例和经验借鉴，信息公司通过提供BI+AI服务，以覆盖数据领域通用场景、满足各类应用场景的存储和计算要求，提供领先行业的数据服务。
快速落地
通过外部厂商实施，快速建立平台，支持多元化数据应用搭建，使得集团能够及时把握市场机会。星环大数据平台提供强大兼容能力，大大降低平台的使用门槛，用户可以结合通用数据技术快速上手。
3
项目实施
01
大数据平台架构
图 统一大数据平台全景
①
大数据平台全景
数据原层
基础层
通过集团建立统一的数据湖，满足离线、实时、外部数据采集相关功能。
规则层 一部分依靠星环科技的Incepter建立的统一SQL防御引擎，另一部分依托星环Sophon部分功能实现的统一科学计算平台。
应用开发层 面向整个中化集团，应用开发层包含各类相关应用，包括战略分析类、风险管控类、经营分析类等各类应用开发。
客户层与展现层
中化集团涵盖五大核心板块，包括化工、能源、农业、地产、金融，数据通过服务接口平台接入应用层。中化集团大数据平台定位于为集团总部以及下属五大板块提供相关服务。可以说，客户侧是整个平台中最重要的部分。
图 平台功能架构图
②
大数据平台功能架构
基于Transwarp一站式大数据平台实现的六大功能，能够应用到主题报表、自助分析、量化交易、权限管理、领导驾驶舱、资产目录、一站式搜索、图像识别、日志分析等各类应用场景之中。
Inceptor分析型数据库
支持数据仓库功能，能够离线批处理数据，实现海量数据的高效存储和统一管理。支持数据集市功能，统一的高质量数据能够满足特定用户需求。
Slipstream实时流处理引擎
提供实时流处理功能，实现流式指标计算、实时规则研判、复杂事件处理、流式机器学习功能，延时低至10毫秒。
Hyperbase分布式数据库与Search大规模搜索引擎
支持综合搜索功能，可以实现任意条件组合查询、全文检索、模糊查询、高并发查询、PB级数据秒级响应。
StellarDB分布式图数据库
提供图计算功能，支持丰富的分布式基础图分析算法，同时支持Graph SQL应用到图分析检索。
实现人工智能功能，具体能够支持R/Python语言、分布式智能算法库、深度学习框架整合、图形化开发、可视化建模的功能。
图 平台软件架构图
大数据平台软件架构
中化大数据平台基于星环数据云平台TDC,构建分析Paas、数据Paas、应用Paas为一体的数据共享交换体系，通过数据接口、安全接口、资源接口、微服务接口对接业务，实现平台云+数据云+应用云三云融合。
02
大数据平台的能力实现
多租户能力
大数据平台按照租户的形式提供服务，能够快速响应用户的大数据应用需求，降低用户建设成本，具有平台稳定、技术全面、数据安全、运维及时等特点。平台运用应用隔离、资源隔离、数据隔离、运行隔离等手段保障数据隐蔽性。中化集团下属五个板块均需要租户能力来提供相关服务，租户能力是平台选型过程中最看中的能力。
图 大数据平台的多租户模式
首先，最底层是整个集团的数据湖区，包括原始数据采集，轻度数据加工和相关备份数据。
其次，中间为租户区，是实现租户能力最重要的区域，以租户模式提供给总部以及下属各个板块相关的应用服务，星环TDC为中化大数据平台架构起多租户能力，实现包括多租户权限划分，相关权限管理等功能。
最后，右侧为平台管理区，结合租户特点实现规范化的数据管理和流程管理。
星环TDC完善计费体系
以资源划分方式，根据每一个TCU对应的相关CPU内存以及磁盘的资源使用情况，给各租户提供相关服务，并进行相关计费，构建出一个以TDC为基础的全面计费体系。
大数据服务能力
中化大数据平台依赖TDH的基础能力，可接入各项多源异构应用数据，构建成一个完整的数据计算和业务分析系统，平台可将实时数据和离线数据打通，使数据可以实现更大规模的关联计算，挖掘出数据更大的数据价值，进而实现数据驱动业务。
目前已经接入了包括党建、科技项目、久其报表以及人力资源在内的12个业务系统数据。
人工智能服务能力
平台通过人工智能系统进行数据统计，从而发现业务规律，最后利用规律对未来的数据进行分类和预测，使系统呈现出智能化的特性，同时也为客户的数据分析、建模、精准营销等功能实现提供有力支持。
目前在中化金融事业部门内，完成了审计部门金融客户流失预警的模型构建及使用。
数据治理服务能力
中化大数据平台提供了数据资产目录的功能，基于数据资产目录Transwarp Catalog实现多系统元数据资产目录，实现对数据的集成、融合、安全、共享，包含数据血缘分析、跨租户数据自动下发、报表管理、数据资产可视化等方面，有效提升客户的数据治理能力。
图 大数据平台数据管理
03
大数据平台支持不同业务场景
图 中化大数据平台目前支持的业务场景
❂ 辅助领导战略管控与决策
这是面向整个中化集团及其整个领导层的能力，能够为领导提供清晰、全面的数据视图，总体掌握战略目标的完成情况，及时洞察各级业务动态，辅助决策。
❂ 支持全面灵活的经营分析
平台基于星环TDH中BI/报表工具Pilot的可视化能力为管理者展现关键的经营信息，对经营指标数据进行监控和预警。
发挥数据联通作用，集成“横向到边、纵向到底”的各项经营管理数据，完善数据覆盖范围，提高数据准确性和及时性。
❂ 助力监管，防范化解重大风险
平台能够满足国资监管的要求，实现报送数据的集中、处理、统一报送的数据服务。
同时为风险评价、HSE、审计、纪检等监管部门等提供大数据监管手段，通过风险画像、主动预警、事件监控等方式，助力开展企业全面风险管理，提升监管效能。
❂ 辅助政策与市场研究
为各类研究人员构建相应的研究专题，为业务发展提供准确的、有价值的参考标准与应用模型，促进知识管理和共享。
❂ 支撑业务优化与创新
平台通过开放的API接口提供个性化数据服务，依托多租户体系下的用户数据权限，按需共享使用，为开展数据应用业务奠定数据基础。
支撑各单位深度开展精准营销、供应链优化、智能制造等多样化的数据应用，助力各项业务创新。
04应用服务案例
图 集团数据共享平台整个数据共享对接统建系统，全部通过离线、实时、外部数据采集到整个平台之上，面向各个板块汇总各类数据。
整个数据共享交换分为三大层面，首先是技术层主要面向数据采集以及相关存储，搭建整个数据存储平台；其次是功能侧，功能侧开发了一些相关模型和应用；最后，以大屏方式去展现整个中化集团的数据和管理层应用。
最终构建了一个全面、多元、庞大的集团级数据共享交换平台。
中化石油大屏
图 中化石油大屏
石油大屏兼具顶级视觉效果以及高性能操控，为各级领导及时了解贸易流向和船舶动态提供直接明了的量化支撑，有效赋能石油公司管控数字化的全面发展。
疫情防控大数据平台
图 疫情防控大数据平台
平台累计迭代版本53个，开发功能板块26项。
05
总结
中化大数据平台提供一站式的大数据解决方案，能够充分整合和管理企业各个系统全生命周期数据，快速挖掘数据背后的价值，落地丰富的数据应用场景，形成数据驱动的闭环迭代生态，赋能业务，综合提升企业管理和运营能力。
