多媒体技术教程 第3版 教学课件 胡晓峰 吴玲达 老松杨 司光亚 多媒体技术教程V3 ch6.pptVIP

第六章多媒体的时间表示与同步 6.1 多媒体同步的基本概念 6.1.1 同步的基本概念 多媒体是在不同应用环境中文本、图像、声音、视频等各种媒体的集成。既然需要将这些媒体安排在一起表现，就有一个先来后到的关系。这个关系就是同步关系，系统对各个媒体对象按照这个关系进行的控制过程，就是同步。 同步的过程与时间有着密切的关系，大多数同步都建立在时间的基础上。 6.1.1 同步的基本概念 基于时间的媒体（Time-based Media，时基媒体） 或时间依赖媒体（Time-dependent）： 媒体与时间有着强烈的依赖关系，在采样、传输和回放表现时更需要以时间为参照系进行有序的组织。 多媒体同步或合成（Orchestration）： 组织时基的、非时基的多种媒体序列通过传输、合成并达到某种表现效果。这个过程既包含表现过程，也包含多媒体信息的传输过程；既可以用于并发或顺序的数据流布局，也可以用于对所产生的外部事件进行安排。 6.1.1 同步的基本概念 简单的时间线表示如图 6.1.2 同步的种类 1．应用同步 应用层同步又称表现同步，或交互同步。这一类同步是从用户应用的角度出发而进行的同步，重点在于表现与交互。 2．合成同步 合成同步又称为“媒体之间的同步” 。这种同步涉及到不同类型的媒体数据，侧重于它们在合成表现时的时间关系的描述。 6.1.2 同步的种类 3．现场同步 现场同步也属于媒体间的同步。它要表现出同一个应用中数据源方与表现方之间存在的实际同步关系，也既端–端之间的同步关系。 4．系统同步 系统同步，又称“媒体内部的同步” 。这里“系统”指的是该层同步如何根据各种输入媒体对应的实际硬件系统（设备）的性能参数来协调实现其上层合成同步所描述的各对象间的时序关系。 6.1.3 同步的分层服务模型 对于多媒体的应用来说，同步是建立在不同的分层的基础上的。不同层次的同步依据不同的接口机制来保证，如下图所示。 6.1.3 同步的分层服务模型 媒体层针对的是单独的媒体数据流，属于物理层的同步，其同步的基础是数据流中的一个个基本逻辑数据单元，通过对这些逻辑数据单元的操纵来保证媒体在时间上的准确。 流层也是媒体内的同步，但是属于服务层，其面对的是多个媒体数据流。它处理的是多流之间的同步，以保证多个数据流在传输和表现过程中能够实现并行和同步。 6.1.3 同步的分层服务模型 对象层的同步是针对多媒体演示过程之中的各个多媒体对象的。通过相应的时间同步方案，保证各个多媒体对象能够按照规定的次序出现，并且能够响应用户的输入事件。 描述层的同步解决的是多媒体表现中各个场景的安排与对象同步的描述。其重点是作者与系统的接口，只关心是否能够被描述或描述的是否正确，而不关心具体如何实现同步。 6.2 时间模型 6.2.1 时间依赖的定义 多媒体是在不同应用环境中对文本、图象、声音、视频的集成。 基于时间的媒体与时间有强烈的依赖关系。 时基媒体的表示方法、时间模型、用户交互、系统实现方法等是问题的核心。体现在三个层次上： 物理层：低层的时间关系 服务层：应用媒体之间的时间关系 人机接口层：用户的随机交互过程，浏览… （与时间有关，延迟不定） 6.2.1 时间依赖的定义 根据各种媒体及其表现特性确定时间的依赖关系。 Static静态的－没有时间依赖 Discrete离散的－单一元素 Transient短暂的－一时的 Natural或Implied自然/蕴含的－真实世界中的时间依赖 Synthetic综合的、合成的－人工产生的时间依赖 Continuous连续的－在时间上连续 Persistant持续的－在数据库中维持的 6.2.1 时间依赖的定义 数据对象分类： 表现及应用生命周期 持续对象－存在于整个应用周期 非持续对象－动态建立并且用后丢弃 短暂对象－出现很短，不需操纵 静态对象－长期存在 6.2.1 时间依赖的定义 数据采集 自然：真实时间－记录时间关系，存储 人工：综合时间关系（合成） 实况：不能进行时间