一种快速DCT域实时视频合成与转码方案精要.doc

一种快速DCT域实时视频合成与转码方案 樊星 顾伟康 叶秀清 （浙江大学信息与电子工程学系信息与通信系统研究所，杭州 310027） 摘　要　在多点会议中提供音频、视频和数据等的集中处理能力的多点控制单元（MCU）中，视频处理能力是并发量和实时性需求相当高的部分。本文为了扩展系统对于多点视频的并行处理能力，针对多媒体会议中的实际应用需求，提出了一种新的多点实时视频合成和转码的方案。这种在DCT域上设计的合成与转码方案大大提高了计算性能，同时提高了合成或转码后图像质量，所以它不仅具有支持大并发量的特点、具有较低的算法复杂度，而且其混合处理结果具有一定的锐化效果。这套方案可以广泛的应用到采用软件或硬件架构实现的多媒体通信系统中。 关键字　多媒体会议 视频合成 视频转码 DCT域 A Fast Real-Time Video Combining and Transcoding Scheme in DCT Domain Fan Xing Gu Weikang Ye Xiuqing (Institute of Information and Communication Engineering, Zhejiang University, Hangzhou, 310027) Abstract　In multimedia conferencing, multi-point controlling unit (MCU) provides the capabilities to process audio, video and data stream for multi-point conference. Video processing capability requires rather much in simultaneity and real-time criteria. Within this article, a new process scheme considered in DCT domain is provided, which meets the demand of the practical need of multi-point speech processing to extend the simultaneity for the system. The scheme designed within the DCT domain improves the computational performance and improves the quality of the output. So systems applied this scheme not only can provided more capability for simultaneous processing, but also has low complexity and has sharpening-effect. Therefore, the scheme can be widely used in the multimedia communication system implemented in both software architectures and hardware ones. Key Words　multimedia conference, video combining, video transcoding, DCT Domain 引言 随着宽带网络的普及，多媒体通信得到了充分的发展。在实际的运营中，多媒体通信服务已经成为实际的产品提供给广大用户。在多媒体通信中，多点会议已经成为一种主要业务。在多媒体通信中，多点控制单元（MCU）作为核心设备是提供服务的关键之一。传统的可视电话和点对点电视会议随着包交换网络接入的普及，已经进入展开大规模应用。多点视频会议也得到推广。相对于传统的点对点模式的视频会议，适应于大规模混合网络环境下运行的MCU必须具备非常强大终端适应能力和强大的视音频处理能力。ITU-T推出标准建议H.231和H.243[8]对多点模式下的视频会议做出了详尽的规定。 集中式多点多媒体通信中的视频部分一般具有两个工作模式，一种是“切换”模式，MCU控制发送各个端点的视频，各个端点接收到MCU指定的一路视频流；另一种是“持续出席”模式，它提供视频合成，MCU按照有关约定的方式将多路视频合成为一路发送各个端点。 虽然“切换”模式对多点视频会议来说并不是一种理想的方式，但是它具有系统消耗小，不需要在MCU上作视频编解码，从而大大降低了MCU的负担。而“持续出席”模式是一种理想多点会议工作模式，但是它需要在MCU上做解码、