基于RTPRTCP和RTSP协议流媒体快速流间同步机制.pdfVIP

基于RTP/RTCP 和RTSP 协议的流媒体快速流间 同步机制 卢日 北京邮电大学电信工程学院，北京（100876 ） E-mail：luri_149@ 摘 要：多媒体同步技术是流媒体技术中一项关键的技术，在通常的流媒体客户端设计中， 同步信息的建立依赖于典型地承载在UDP 协议之上RTCP 包，导致媒体对象的第一回放时 间具有不可预测性。为了缩短回放前的等待时间，本文基于RTP/RTCP 协议和RTSP 协议， 提出了一种快速确定媒体流间同步关系的机制。 关键词：RTP ，RTSP ，流媒体，流间同步 1. 引言 流媒体技术是近几年 Internet 飞速发展的产物，它融合了媒体数据的采集、编解码、存 储以及网络传输等多项技术，它的出现有效地解决了音频、视频等媒体数据在计算机网络中 的实时传输的问题，被广泛应用于远程教育、视频点播、视频会议、IPTV 等业务中。 多媒体同步技术[1]是流媒体技术中一项关键的技术，已经引起了国内外的广泛关注。多 媒体同步技术的目的就是向用户展示多媒体信息时，保持多媒体对象内和对象间固有的时域 约束关系。多媒体同步包含两类同步：一类是流内同步，其主要任务是保证媒体流内部的相 对时态关系，也就是按一定的时间要求传送每一个多媒体对象，并在客户端能够进行连续的 展现。另一类是流间同步，主要任务是维护媒体对象间的时间关系，如音频和视频之间的时 间关系（即唇同步）、音视频与文字之间的时间关系等等。 RTP/RTCP 协议[2] [3] 是流媒体协议栈 中一个重要的组成部分，它承担了媒体数据的传送 任务，RTSP 协议[4]则在流媒体协议栈中负责控制媒体数据的有效传输，RTSP 和RTP/RTCP 协议是整个流媒体协议栈的核心部分。本文主要针对IP 网络环境，并基于RTP/RTCP 协议 和RTSP 协议，利用RTP 时间戳、RTCP 包中RTP 时间戳和NTP （Network Time Protocol ） 时间戳的映射关系以及RTSP 中RTP 时间戳和NPT （Normal Play Time ）时间戳的映射关系， 快速地确定媒体流间的同步关系，同时还可以消除各媒体流间的同步依赖关系，使得流间同 步的复杂度与媒体流的数目无关。 2. RTP/RTCP 协议简介 实时传输协议RTP （Realtime Transport Protocol ）为具有实时特征的数据流提供端到端 的传输服务，其目的是提供时间信息和实现流同步。RTP 的典型应用建立在UDP 之上，并 且提供了部分传输层协议的功能，但RTP 也可以在其它的网络或传输层协议（如TCP ）上 工作。RTP 本身并不监控和传输会话的服务质量（QoS ）和会话的相关信息，它依靠实时传 输控制协议RTCP （Realtime Transport Control Protocol ）来完成，在RTP 会话期间，各参与 者周期性地传送RTCP 包，包中含有RTP 时间戳与NTP 时间戳的映射关系、已发送的数据 包的数量、丢失的数据包的数量等信息，服务器可以利用这些信息动态地改变传输速率，甚 至改变有效载荷类型，客户端则可以利用这些信息实现媒体间的同步。RTP 和 RTCP 的配 合使用，能以有效的反馈和最小的开销使传输效率最佳化。图 1 给出了RTP/RTCP 协议的 典型应用在流媒体协议栈中的位置。 - 1 - 图1 流媒体协议栈 3. RTSP 协议在同步控制中的作用 实时流协议RTSP （Real Time Streaming Protocol ）是一种用于控制实时数据流有效传输的应 用层协议，同时也提供对实