并行VOD+系统负载均衡问题的研究.pdfVIP

并行 VOD 系统负载均衡问题的研究 任久春（复旦大学通信科学与工程系，ren@ ） 李翠莲（复旦大学通信科学与工程系，clli@ ） 马允胜（复旦大学通信科学与工程系，ysma@ ） 摘 要 数字媒体服务的不断发展，常常使我们经常去升级服务系统，这时实现分布式可扩 展的系统的优越性就得以体现。在这一系统中，有一个非常重要的问题就是负载均衡，数字 媒体的负载平衡不同于一般系统的负载平衡，还要考虑磁盘的容量问题。媒体点播系统的也 每个服务节点的信息是不同的。负载平衡的算法直接关系到问题的解决。 关键字 负载平衡、多媒体服务器 随着网络技术和网络经济的迅速发展，网络多媒体越来越多的走进普通百姓的生活。由 于数字多媒体向着高清晰度、高质量的方向发展，这意味着网络负载加重和硬盘存储空间的 增大，在很多情况下，已经成为媒体服务的瓶颈，要解决这一难题，并行处理是一种较好的 模式[1]。为了解决上述问题，发展出一系列新的解决方法[2][3]，提高多媒体播放服务质 量。2001 年 6 月复旦大学开通了 DWDM 宽带光网，在此平台上我们实现了自己的并行 VOD 点 播系统。 一． 问题分析 作为一个完善的媒体播放系统，它必须具备良好的可扩展性。因为媒体播放的数据量在 很短时间内会迅速增加，很容易超过系统极限，另一方面，在某段时间内，可能由于某些用 户集中点播一些节目造成硬盘读的阻塞而无法提供有效服务。这个问题有两种解决方案，其 一，单个服务器的解决方案，也就是升级单个服务器的，但这个方法成本高，升级难度大， 并且很容易再次达到负载极限。其二，多个服务器解决方案，当负载增大时，简单增加一个 或多个服务节点就能解决问题，这需要一个负载平衡服务器来管理其他节点。如图一所示： 1 图一：负载平衡服务器 当然还可以把上述两种方案综合起来，这是因为服务节点个数也有局限性，不能无限制 增加，此时为了整体服务质量而提出的。 对于一般的网络服务，如最典型的 www 服务，大致可以以 NAT （Network Address Translation），DR （Direct Routing），IP Tunneling 三种方式在 ip 层完成负载平衡，每 一个服务节点 （real sever）的硬盘信息相同，负载平衡主要是解决单个节点的处理能力问 题。与这些网络服务的负载平衡问题不同，在高质量的多媒体服务器负载平衡系统设计中， 我们同时还需要考虑硬盘容量的问题，因为数字媒体的这就是说每个real server 的存储信 息可以不同，从而实现整体存储容量的增加。 二． 系统结构 为了有效管理不同服务节点的媒体信息，需要后台数据库作为支持，方便用户查询。 整个系统硬件结构如图二所示： 2 client Database Load Balancer Backup Real Server Real Server Real Server 图 2 系统硬件结构框图 整个系统包括虚拟主机 （load balancer）及其备份节点，数据库系统和服务节点 （real server）等三大部分，整个系统对于用户来说是透明的，client 直接访问虚拟主机（load balancer）,由主机完成查询等工作。 从软件模块上看，整个系统包括