基于广电网互联网应用的智能缓存系统.docxVIP

东方有线专栏 运维管理 节目制播 实践应用 行业动态 ● ● ● ● ● ● 基于广电网互联网应用的智能缓存系统 董现民 大连天途有线电视网络股份有限公司 摘要：本文提出的智能缓存系统主要由两部分组成，即综合数据分析系统和智能缓存子系统。综合数据分析 系统能为智能缓存子系统提供资源导向，从而使得缓存资源内容更加智能、有效。智能缓存子系统根据综合数据 分析系统统计结果筛选数据，对全网热门的业务资源进行智能缓存备份。 关键词：分光旁路 页面缓存 P2P 1 背景 由于国内互联网环境的特殊性， 目前中国的互联网内容绝大多数是托 管在中国电信和中国联通的 IDC 机房 里，使得广电的互联网宽带接入用户在 访问相当部分的内容资源时需跨越多 个运营商网络，不可控的延迟时间造成 了用户的访问体验较差。同时，数量众 多的广电宽带接入用户的访问请求经 由互联互通出口送出，由此产生昂贵的 互联互通费用大大地制约了广电的互 联网数据业务发展。因此，在接入业务 上，广电一直面临着一个怪圈： （1）作为内容资源提供方的互联 网网站由于多种原因不愿将自己的服 务器放置在广电的 IDC 机房托管。 （2）大量的互联互通结算流量使 广电承担了高昂的结算成本，即使广 电不计成本的投入资金对出口进行扩 容，但却依然无法提供让用户最终满 意的访问效果。 广电运营商受制于内容缺乏，很 多业务只能浮在空中，运营商寻求与 内容掌控者的合作势在必行。另外， 对运营商而言，P2P 技术及应用带来 的冲击和挑战是非常巨大的。P2P 应 用在吸引大量客户的同时，也会使网 络流量急剧上升，导致电信运营商运 营成本大幅提高，扩容压力增大。所 以如何应对 P2P 带来的冲击和挑战已 经成为摆在电信运营商，尤其是广电 运营商面前的重要课题。 在广泛的文献调研的基础上，本 文主要对基于互联网应用的智能缓存 系统进行了研究，此外还提出了互联 网内容流量优化方案以及互联网内容 缓存部署方案两大技术方案。 2 总体方案 2.1 方案概述 本方案通过对综合数据分析系统 （支持 1G 与 10G 数据采集）与网络 智能缓存子系统（支持出口及多级缓 存）进行整合，根据网络应用分析可 以智能地调整广电内网访问的缓存， 使得广电互联网业务更多地利用本地 广电网络资源，减轻电信互联网出口 负载，从而实现降低运营商成本、提 高互联网业务质量的目的。 2.1.1 方案设计原则 在网络架构的设计上，该方案充 分考虑了平台对现网网络架构及对最 终用户体验的影响，方案在设计上采 用分光旁路接入的方式，避免了串接 设备方案对于运营商网络可能造成的 单点故障问题，也规避了在实际实施 中对现网配置及拓扑结构的改动，提 供在不中断现网业务及用户应用的情 况下接入系统，实现平台实施彻底对 用户透明。 39●广电网络方案在设计上，我们遵循以下原 则：整体性原则、标准化原则、安全 性原则、扩展性原则、可靠性原则、 39 ● 广电网络 2.1.2 方案平台架构 方案平台架构部署如图 1 所示。 互联网应用智能缓存系统包括以 下两个子系统： （1）综合数据分析系统 综合数据分析系统对广电网络中 的全网业务数据进行获取并分析，通过 全网互联网业务统计，挖掘热门资源列 表，为缓存系统提供资源备份依据。 （2）智能缓存子系统 智能缓存子系统根据综合业务统 计结果为细化依据，对全网热门的业 务资源进行选择缓存备份。 2.2 综合数据分析系统 综合数据分析系统在精确采集广 电运营数据的基础上，实现对互联网 业务及互动业务的综合分析与数据挖 责编：杨玉波 邮箱：catvyang@163.com 技术前沿 ● 广电网络 ● 数字电视 ● 成都广达有线电视接入网专栏 ● 确定需要备份哪些常用资源，从而减 少备份冗余。排名统计如表 1 所示。 图 1 平台架构部署 表 1 排名统计表 图 2 缓存分光重定向模块功能示意图 2.3 智能缓存子系统 2.3.1 重定向模块（RDS） 功能 说明 RDS（Redistrabute Server） 应用排名应用范围热门网站 / 页面排名指导网站页面内容进行缓存热门 HTTP 视频排名指导 HTTP 视频内容进行缓存热门应用流量排名针对指定 P2P 业务类别进行缓存为 DNS 流量分析控制模块，用于劫持 DNS 流量，有正向和反向劫持两种模 式。一般情况下选择正向劫持，如果 应用排名 应用范围 热门网站 / 页面排名 指导网站页面内容进行缓存 热门 HTTP 视频排名 指导 HTTP 视频内容进行缓存 热门应用流量排名 针对指定 P2P 业务类别进行缓存 RDS 是旁路部署，且只过滤 DNS 流量，不对现网设备和线路造成影响。 RDS 软件具备完善的保护机 制。当 RDS