基于3DTV编解码技术视频流传输研究.docVIP

基于3DTV编解码技术视频流传输研究 　　摘 要：电视技术先后经历黑白、彩色、数字高清等发展阶段，随着科技的不断进步，立体电视逐渐成为关注的焦点。立体多视角3DTV处理系统构建及实现的关键在于对面向3DTV的立体视频编解码及传输流方法进行深入分析。本文首先介绍立体视频编码，在此基础上对立体视频压缩编码方法及立体视频流传输方法进行阐述。 　　关键词：立体电视，编解码技术，视频压缩编码，视频流传输 　　3DTV codec based video streaming technology research 　　Abstract: Television technology has gone through the black and white, color, digital high-definition and other stages of development, as technology progresses, the three-dimensional television has become the focus of attention. Three-dimensional multi-view 3DTV processing system is the key to build and achieve stereoscopic 3DTV-oriented video codec and methods for in-depth traffic analysis. This paper describes the three-dimensional video coding, on the basis of three-dimensional and three-dimensional video compression coding method for video streaming method described. 　　Keywords: three-dimensional TV, codec, video compression, video streaming 　　 　　1. 前言 　　3DTV根据人体左右眼视差特性产生并显示立体图像，带给观众全新视觉享受。立体电视是随着科技的不断进步，电视技术发展的一大趋势，但当前仍面临一些亟待解决的问题，例如，观众视觉特性无法得到切实满足，出现错位时会造成视觉疲劳或头痛；多摄像机成本较高；立体制片程序繁杂、成本高，节目源有限等等。实时立体多视角3DTV系统构建的重点在于3DTV编解码技术及立体视频流的优化传输。 　　2. 立体视频编解码分析 　　立体视频与传统单通道视频相比，需要处理的数据量更大，在此笔者从空间、时间以及两个通道间的立体视频冗余的角度分析立体视频编解码技术；此外，压缩存储及传输立体视频数据则主要依托于运动补偿预测及视差补偿预测等技术。 　　MPEG-2标准中图像编码的层次结构。MPEG-2标准中图像编码码流从上而下依次分为6个层次：视频序列层(Video Sequence)、图像组层(Group of Pictures，GoP)、图像层(Picture)、宏块条层(Slice)、宏块层(Macro Block)及像块层(Block)。 　　除宏块层和像块层外，其他4层都有相应的起始码，解码器重新捕捉同步，以免一次不同步而丢失一组像素的数据。序列层是指构成某路节目的序列，序列起始码后的序列头中包括了图像尺寸、宽高比、图像速率等信息，序列扩展中包含了一些附加数据。为了保证能随时进行图像序列化，序列是重复发送的。图像层由图像层头部和宏块条层数据组成。图像不仅是基本编码单元，也是一个独立显示单元。图像可分为I、P、B三种类型。图像层头部中包含了图像编码的类型和时间参数信息。立体视频拍摄突出特点就是借助双目平行相机系统从两个视角拍摄一个景物，这样所得到的视频是由左通道及右通道构成，每帧图像内部的像素之间有信息冗余存在，与此同时，通道内部多帧图像之间也有信息冗余存在，在立体视频传输系统之下，借助编解码技术及压缩技术可以将此类信息冗余予以消除。当前已经具备较为成熟的单通道视频编码标准，例如MPEG-2、MPEG-4、H 264以及AVS等，在相关标准所具有的时域分级特性基础之上，实施立体视频压缩具有现实可行性。时域分级分为两层，分别是基本层及增强层，其中，基本层与立体视频左通道对应，增强层与立体视频右通道对应。建立在AVS标准基础之上的立体视频编码示意图详见图1所示。 　　在上图中，以AVS标准为主要依据，左通道实施简单编码，并对右通道各个图像块进行预测，预测方式主要有两种，分别是MCP及DCP，以误差较低的作为最终预测结果。