浅谈多媒体同步技术.doc

浅谈多媒体同步技术 多媒体同步特性? ?1.1什么是多媒体 多媒体在计算机系统中，两个或两个以上的信息和互动媒体的人机交流的媒体组合。使用的媒体包括文字，图像，照片，声音，动画和视频，以及由该计划提供的互动功能。? 多媒体本身有两个方面，和所有现代技术一样，它是一个硬件和软件，或机器和思想混合。多媒体技术和能力，在概念上可以分为控制系统和信息。 多媒体已经能够实现是依靠数字技术，多媒体数字控制和数字媒体代表的数字式计算机控制系统的衔接，在当今最先进的音频和视频的存储和传输形式的数字媒体。 1.2什么是多媒体同步 能够对多种媒体进行处理是多媒体系统的基本特征之一。在这些媒体之中文字、图形、图像等是不随时间变化的，而声音或视频信号则是时间的函数。数学上随时间变化的函数在实际中表现为一个数据流；如果媒体的每个单元在播放时所用的时间都相同，则称这种媒体为连续(continuous)媒体。? 一个多媒体系统至少应该能够支持一种连续媒体。媒体之间的相互依存关系，不只是显示时才有，在捕获、存储、传输和处理过程中也是存在的。 不同媒体对象之间的相互依存关系可概括为3类：? (1)内容关系。根据某一组数据既可以列出表格，同时又可以画出曲线，那么，在计算机中只需要保存一份数据，而将表达这组数据的方式另作定义，这称为指定数据间的内容关系。同一组数据可以对应于几个不同的内容关系。? (2)空间关系。主要指不同媒体对象在显示中所处的相互位置关系通常它们分别在不同的窗口中显示，而每个窗口又允许有缩放、移动、激活等功能，这些复杂的相对位置关系需要有一定的方法来描述。? (3)时间关系。电视中的伴音要求很好地和人的口形动作相吻合，幻灯片的解说词应该与正在显示的图像相对应，这是媒体对象之间必须保持一定时间关系的典型例子。? 多媒体的同步要求? 主要分为多媒体通信同步、多媒体表现同步及多媒体交互同步等。这几种同步要求相互影响相互制约，其中，表现同步和交互同步属于上层同步，即用户层同步，是由用户的需求来决定的一种大体上的同步。? 多媒体同步研究的意义? 随着语音，图像压缩技术的不断突破，和数据宽带移动互联网的增加，开发新一代高品质的多媒体移动终端的客观条件已经成熟。新一代的终端的研究和应用是在无线互联网的同时音频和视频通信的重要方向之一。音频和视频对象的表现，即动态再现声音和图像序列，同步是非常重要的。音频信息的需求，以保持其连续性和变化必须是同步的视频信息，音频信息的变化。我们必须在发送器和接收器同步控制，恢复的数据之间的时间同步。因此，多媒体同步研究的问题具有重要的理论意义和实践意义。?? 多媒体同步方法及比较? 早期对多媒体同步的研究主要集中在对多媒体流的同步，已经提出了一些同步方法。例如分层同步、时间轴同步、参考点同步等方法，随着高速网络的发展，多媒体流在网络上或分布式系统中的同步问题变得非常突出。传统的多媒体流同步技术不能解决网络多媒体流同步的问题。另提出了一些同步方法。?? 1）分层同步法? 分层同步法是基于分层同步模型基础上的一种同步方法，主要基于两种同步操作：一种是动作的串行同步；另一种是动作的并行同步。该方法的优点是易于操作并且应用广泛，但其限制是每一个动作只能在起点和终点进行同步。这就使得分层同步法不能支持多媒体对象内部结构的适当抽取，从而无法实现灵活的交互操作。? 优点：层次清晰、管理方便；? 缺点：同步仅在动作开始和结束时进行。?? 2）时间轴同步法? 时间轴同步法是基于时间轴同步模型，是将所有独立的对象依附在一个时间轴上进行描述，去掉任何一个对象都不会影响其他对象的同步。这种同步方法是维持一个整体时间，每个对象可以将整体时间映射到它的局部时间，并由此局部时间表现。当局部时间与整体时间的误差超出一个指定门限时，则需要重新与整体时间进行同步。通过时间轴方法同步的对象可以较好地从单媒体对象和多媒体对象的内部进行抽取。 ?3）参考点同步法? 借助参考点的同步可把多媒体对象分为两类基本对象。动态基本对象由播放对象的序列（视频中帧）组成，周期性出现。每个播放对象的索引叫一个参考点。这样的单一媒体序列的同步叫作对象的内部同步。 4）时间戳同步法? 时间戳同步法把每个媒体间的数据流单元加进统一的时间戳（时间码），具有相同时间戳媒体单元同时进行播放，以达到媒体间同步的目的。时间戳同步法又分为绝对时间戳同步和相对时间戳同步。绝对时间戳同步使用绝对时间标识。相对时间戳同步使用全局时间和局部时间标识，它既可用于实时多媒体通信，也可用于多媒体信息存取，还可适应于多点通信，即同一信源发往不同目的地，不同信源发往同一接收地。?? 5）同步标记法? 同步标记法是在发送端发出一个同步标记，接收端接收同步标记，用来对各个媒体进行同步处理以达到双方通信同步的目的。