利用队列机制实现AV同步.pdfVIP

利用队列机制实现A/V 同步 李哲，邓明 中国地质大学地球物理与信息技术学院， 北京 100083 Email ：zhejunli@ 摘 要：本文介绍了一款基于Equator BSP-15 DSP 芯片的嵌入式流媒体机，没有介绍如何 采用高层协议保证同步，而是从比较底层的原理着手，从音视频的采集开始，描述了如何利 用队列机制，在Linux 多线程环境下，实现音视频的采集、压缩、传输过程的同步。实验结 果证明，在 100Mbps 局域网环境下，每个解码端能够实现本机的 A/V“唇同步” ，多个解码 端之间的同步播放效果也很好。 关键词：BSP-15 ，流媒体，音视频，同步，队列机制 0. 引言 随着嵌入式设备硬件配置不断提高，软件不断丰富，流媒体这种需要强大处理能力的技 术也日益广泛应用到嵌入式系统中，比如：DTV ，IP-STB ，IP-Phone,视频监控机等。本文 中的嵌入式流媒体机以Equator BSP-15 多媒体信号处理器为硬件核心，Tetra Board 为硬件平 台，嵌入式Linux 为软件平台，采用队列机制而非时间戳方式实现A/V 同步。作为编码端 时，它能够实时采集、编码（MPEG4 格式）、传输30 帧/秒的Half D 1(360*480)视频图像， 同时还有能力同步采集、传输两个声道PCM 音频数据，采样率最大48kHz，样点长度为24 位。这种强大的处理能力完全得益于Equator BSP-15 对音视频应用的针对性设计，使得音视 频数据的采集、DMA 传输、压缩都得以高效率完成。解码端的运算负载比较轻，实测表明， 编码器占用的DSP 计算周期比解码器多2 倍以上。 编码端和解码端的BSP-15 运行在405MHz ，只是运行不同的软件，实现在局域网内N(个 编码端)对M （个解码端）的音频/视频实时编码、传输及解码、播放。除了Sub-AV 编码端， 每个编码端向一个组播地址发送音视频流，每个解码端可以选择接收任意一个编码端的流 （点播）。总体的拓扑结构如图1 所示。 除了正常的多媒体节目播放功能，这套流媒体系统还考虑到了信息发布的功能。本流媒体机 在作为飞机上多媒体设备时，除了为旅客提供流媒体节目点播，流媒体机还必须具备以下的 控制功能：1）在紧急情况下，飞行员需要与乘客直接讲话，能够直接把语音插入到当前所 有音频流中，覆盖当前节目的声音。同时飞行员的声音要具备很高的优先级，很低的延迟时 间，通常要小于 120mS 才能满足要求。这个功能叫做PA(Priority Audio) 。2 ）当机务人员有 语音通知乘客，或者整点报时的声音，也需要通过流媒体系统播放出去，这个功能叫做 CHIME ，它并不需要低延迟时间，不需要影响乘客观赏当前节目，只需要把声音与节目的 声音混合叠加在一起播出。3 ）当机组人员需要给乘客声音和图像的演示时，比如教乘客如 何系安全带，就需要把当前所有节目切换到摄像头和话筒，让乘客看到和听到演示，这就相 当于换了一个节目频道。这个功能叫做BRIEFER ，也不需要低延迟。 -1- 55 控制通道的 Sub-AV 编码端 解码端 1 A/V 输入设备 DVD 1 编码端 1 解码端2 DVD 2 编码端2 … 224.0.1.N DVD N 编码端N