大数据助力媒体融合——央视大数据平台技术与实践.pdfVIP

N黜 业务 团中央电视台 梅剑平 网业务的特点，特别是进入媒体融合时代后，从媒体的内 贪绍了央视大数据平台建设情况．扶系统絮构及技术 一磊-i＼一。一。一一 容形态、传播途径到接收方式都发生了许多全新的变化， 路线．用声数据采集接口及格式、用户画像．收视分析和 来自互联网业务的大数据算法、模型或经验往往难以直接 数据i】视化五令方面对技术平台的设计需求进行7分折． 应用于电视媒体。广电应在充分借鉴互联网大数据技术的 对系统结构和数据采集接口送行7详细说明。 基础上．研究视频用户的行为特点．发现自己的大数据算 法和模型。央视大数据技术研究重点对电视媒体的用户画 一一7孙． 一一一…一一一一． 像算法、收视分析模型等关键技术进行了研究。 央视大数据平台 需求分析系统结构算法 央视大数据技术平台的设计需求包括5个方面： 数裾采集接口 ·系统架构及技术路线：针对融合媒体的业务分析需 求，对比国际上开源与商业大数据解决方案的特点，规划 中央电视台大数据技术研发是伴随着媒体融合同步启 大数据平台的系统架构：选择适应的组件工具．以满足用 动的，是央视媒体融合的重要组成部分。自2016年中央电户大数据的存储和计算的需求： 视台确定“一体化协同制作、多渠道协同分发、多终端互 ·用户数据采集接口及格式：针对央视专区互动电视 动呈现、全媒体精准传播”的媒体融合技术规划．即开始 端和移动客户端，定义用户数据的类别和标签．形成统一 了对大数据的技术研发、平台建设和应用实践。随着媒体 的数据格式．以实现不同终端用户行为数据的归并： 融合的推进，中央电视台的节目内容开始从电视端向着互 ·用户画像：针对央视专区和央视移动客户端的个性 动电视端和移动客户端全面拓展．央视大数据技术研发首 化需求，研究不同终端用户画像的算法，建立画像模型： 先面向央视专区互动电视端和央视移动客户端，为个性化 ·收视分析：针对融合媒体的业务逻辑，研究收视评 节目推荐和内容编排与优化提供数据支撑。 估算法以及量化评估指数．以实现节目收视的排序与优化 在媒体融合时代．用户大数据已成为电视台、网的 ·数据可视化：针对各种分析指数和用户画像进行可 重要资产，因此央视大数据平台从建设之初就定位于自主 视化，支持分析结果的交互式查询和实时呈现。 研发，自主保存、自主分析．在掌握核心技术和原始数据 的基础上，通过中央电视台技术科研项目的平台．与我国 系统结构 985重点高校上海交通大学合作，采用产学研联合研发的方 式．开发建成了具备数据采集、清洗、存储、收视分析、 央视用户大数据系统的整体结构如图1所示。系统在 用户画像以及可视化等功能的用户大数据平台。 总体架构上采用了开源的分布式大数据技术框架Hadoop／ 众所周知．大数据起源并迅速普及于互联网行业。但 sparK．支持不同来源的异构数据的多种导入方式、支持基 是，用户的具体行为与信息的传播和接收方式之间具有密 于流式计算的数据清洗、数据归一化以及数据融合。BI系 切关系，视频媒体的传播与收视具有许多不同于一般互联 统架构于Had