基于DSP的多通道视频融合处理研究.pdfVIP

中国航空学会 控制与应用第十三届学术年会5—18 基于DSP的多通道视频融合处理研究 徐清华龚光红冯勤 北京航空航天大学先进仿真技术航空科技重点实验室北京100083 摘要为满足仿真系统对高分辨率和良好沉浸性的无缝宽视场的需求，同时跳出目前市场上基于工控机的设计思 路，设计基于DSP的多通道视频融合处理系统。文章从硬件和软件两部分对系统进行了介绍。首先介绍了系统的硬 件设计结构，结合系统需求对硬件部分的媒体处理器、视频编码器和解码器等关键器件进行了详细介绍，提出了一 些适应系统需要的设计方案。在软件部分首先对系统融合处理的算法基础进行了详细阐述，介绍了融合函数的选取 原则并给出在该原则下所选择的融合处理函数，函数中也考虑了伽玛校正的因素。随后给出了在评估板上进行融合 处理的软件流程和处理效果。 关键词数字信号处理器，边缘融合，视频编／解码器、DM642 1引言 随着仿真技术的不断发展，人们对仿真系统中视景显示的效果要求越来越高。单一投影仪和单 一屏幕的简单投影显示模式已经不能满足人们的需求，于是产生了多通道、宽屏幕的视频拼接显示 方式，这一显示方式因其能够带来宽视场、高分辨率和良好的沉浸感而迅速得到重视和发展。近几 年来，随着软硬件技术的发展，无缝拼接技术进入了很成熟的阶段，并已广泛应用于虚拟仿真培训、 工业制造设计，在展示展览、视觉娱乐、广告等领域的应用也越来越普遍。然而使用这种所谓的“无 缝”拼接显示技术所得到的场景并非完美无缝的，相邻通道间仍然存在一条宽约0．5个毫米的缝隙。 对于一些对显示效果要求不是很高的场合，这个缝隙被人为地忽略掉。这种投影拼接方式通常被人 们称为“硬边拼接”。 而在一些对视景完整性和沉浸性要求较高的场合，硬边拼接的微小缝隙也是不可接受的。为了 实现真正的无缝拼接显示效果，业界提出了采用边缘融合处理技术的软边拼接投影方式。该方式将 两台投影机投出的图像在拼合处以叠加的方式重叠，然后对重合部分的亮度进行处理，使叠加后的 效果与单台投影仪的投影效果一致。如此就可以进行真正意义上的无缝拼接，实现具有高分辨率和 良好沉浸性的仿真显示场景。国内虽然已有相关边缘融合处理系统，但都是基于工控机的实现，尚 未出现基于DSP等微处理器的应用研究。 本文就视频融合在DSP(DigitalSignalProcessor)系统中的实现进行了探讨。重点阐述了进 行融合处理的DSP硬件系统结构，讨论了融合算法在DSP中的实现。 2系统硬件结构 边缘融合所处理的对象是各种格式的视频数据，处理过程数据量很大，这就要求目标系统的CPU 具有很高的运算能力和数据吞吐率。单片机不能很好地完成以乘法和加法运算为主的算法。专用芯 片的运算速度快，但缺乏灵活的可编程性，难以通过软件升级实现设备的更新换代。传统的通用DSP ：占片，虽然具有可编程性，但缺乏多媒体信号尤其是视频信号的外围接口，而且也缺乏针对图像和 字节操作的专门指令，给开发工作带来很大的困难，主要表现在一方面需要复杂的外围电路构造专 用视频接口，从而提高的系统成本，另一方面因为缺乏特殊指令操作，使高速DSP处理器在视频处 理方面难有出色的表现。近年各DSP厂商推出的媒体处理器DSP芯片不但继承了传统DSP的高运行 中国航空学会 控制与应用第十三届学术年会5-18 速度和强大数据处理能力的特点，而且针对音视频媒体应用进行了特定的扩展。特有的音视频输入 接口简化了外围接口电路，使得信号输入更加简单易行，专用的媒体处理功能简化了开发过程，降 低了成本。这些特点恰好是进行边缘融合处理所必需的。因此我们决定采用这种DSP芯片作为系统 媒体处理器因其较高的运算速度、强大的数据吞吐能力被我们选定为系统的CPU 2．1TMS320DM642结构特点 DM642是TI公司推出的一款功能强大的定点数字媒体处理器芯片。该芯片应用C64x核，具有八个 条指令每秒)的运算速度。采用L1／L2内存结构，Ll包括高速程序缓存器(LIP)和高速数据缓存器 (L1D)，程序和数据共享第二级存储器L2，L2可以被灵活地配置为静态存储器、高速缓存器或二者 的混合模式，大大提高了CPU读写数据的速度。外设中包括64位的外部存储器访问接口(EMIF)，可 的外设还包括三个可配置的视频端口，提供与通用视频编码器和解码器的无缝接