大数据平台建设方案技术交流.pdf

中国智网创新中心

大数据平台建设方案技术交流

目录

01现状分析

1.平台现状建设、问题总结分析、客户痛点分

析

02规划思路

1.本期建设目标

2.平台的建设规划

3.平台建设技术方案：建设背景、探索历程、平台实践、总结与展望

03产品设计

1.资产注册4.数据同步干货附录

2.建模分发5.统一调度05

3.数说工厂1.某省电信数据湖实施案例

04成功案例2.数据资产管理，数据资产运营

1.某省超大规模集群建设项目

2.某省电信全域数据融合建设项目

1现状分析

建设现状：集团大数据平台建设现状

集团大数据平台建设现状数据割裂、共享困难，

集团现状：目前接入全国的O域话单数据、B域用户数据、M域工参数据等基础数据，包括全量信令面、用户数据价值释放有限。

面2G/3G/4G/5G数据，数据量预估1.2P/天。平台现有规模700台+服务器，预计未来规模将达到数千台服务器。

在数据层面，数据资产管理首先解决的是企业内系统间数据孤岛的问题，将不同系统中的数据进行全面汇集

和管理，通过数据提炼分析、集中化管理，形成企业数据资产和洞察，服务于业务，解决了数据“汇管用”的多集群异厂家、异部门

问题。在业务层面，通过对各业务线的模块去重和沉淀，共享通用模块，让前台业务更加敏捷地面向市场，建设，跨区域管控困难。

实现企业新业务的快速上线与迭代试错，服务更多场景，提升业务响应力。在技术层面，避免重复开发，技

术迭代升级更高效，可按需扩展服务，让整个技术架构更开放。数字中台最终的应用价值是在充分市场竞争

下，保持并提升企业的运营效率和创新能力。重复建设、重复投资、

运维成本高。

痛点分析

1.数据割裂，跨区域，冒烟式建设，集群很难统一管理。数据加工不透明，相同

2.数据分散、共享困难，数据价值释放有限，无法变现。现状分析指标加工口径不统一。

3.数据冗余多、集群数据处理效率不高、占用物理资源高，重复建设，成本高。

4.数据质量有待提升、缺乏端到端的血缘管控，缺乏数据治理体系。缺少端到端的血缘数据

质量工具。

5.数据服务便捷性有待提升，缺一站式数据安全取数体系。

6.数据挖掘模型不够丰富，行业垂直数据建模能力相对较弱。

数据服务便捷性有待提

升。

廊坊无内蒙、郑治各省大理

州

大数据大数据平数据平