电信运营商大数据应用系统建设方案研究.pdfVIP

N 新应用 ew Application 电信运营商大数据应用系统建设方案研究 □赵跃东 王隽峰 曾王平 广东省电信规划设计院有限公司 【摘要】随着互联网的高速发展，全球数据生产高速增长，信息已成为企业战略资产，而大数据被业内普遍认为是电信运营商“去管 道化”最有可能的实现方式之一，大数据应用系统的建设对电信运营商而言迫在眉睫。本文对电信运营商大数据应用系统的建设进行 探讨，对大数据平台的功能架构、数据库 建设方式、数据采集方案等进行研究，力图从解决方案上对电信运营商省级公司部署大数据 平台提供借鉴。 【关键字】 互联网 大数据 系统建设 一、背景 大数据运营监控平 台 ：解决大数据运营监控 ，调度 ，开 随着互联 网、移动互联 网、数码设备 、物联 网等技术 的 发 ，运营维护问题处理和运营分析平台； 发展 ，全球数据生产正在高速增长 ，信息已成为企业 的战略 大数据数据服务平 台 ：满足快速对外提供统一数据服务 资产 ，企业越来越需要长期保存各种数据 ，以进行用户行为 共享平台。 分析、市场研究等 ，服务企业发展 。 目前 ， “去管道化”成 三、大数据应用系统数据库建设 为电信运营商提得最多和思考最多的问题 ，业 内认为大数据 对 于大数据平 台数据库 ，建议采用传统关 系型数据库 是运营商 “去管道化”最有可能的实现形式之一 ，运营商发 +Hadoop 的混搭方式进行建设 ，主要基 于 以下考虑 ：1、对 展大数据具有其他行业无可 比拟的优势 ，主要体现在 ：运营 于传统结构化业务数据 ，采用关系型数据库 已非常成熟 ，新 商掌握数据充分全面 ；通信 网络数据提供 的可持续性 ；运营 建平台延续采用关系型数据库处理传统数据 ，避免大量改动。 商对数据可以有效利用 。 2、对于非结构化数据 ，则采用 Hadopp 架构进行处理 ，解决 在此背景下 ，本文将对 电信运营商大数据应用系统建设 以下问题 ：海量数据储存成本高 ；数据批量处理能力不足 ； 方案进行探讨 ，为省级 电信运营商部署大数据平 台提供借鉴 。 计算和存储扩展能力受 限；流式数据处理能力缺失 ；缺乏非 二、大数据应用系统功能架构 结构化数据的处理能力 。 大数据系统 目标架构 ，主要 由五大核心平 台构成 ，如下 四、大数据应用系统数据采集方案 图所示 ： 电信运 营商大数据平 台数据 主要来源为两种 ：来 自 IT 系统的结构化数据和来 自网络的非结构化数据 。 4.1 结构化数据采集 数据来源主要包括来 自 CRM 系统 的客户 / 用户资料 、 产品/ 销售品、产品订购、业务办理等 ，来 自计费系统的账单 、 详单 、余额 、缴费、欠费等 ，来 自结算系统 的结算清单 、过 往记录等 ，来 自客服系统 的咨询投诉 、外呼等 ，来 自网厅 的 电子订购、业务办理 、电子渠道咨询 / 投诉等 ，来 自ITV 的