多媒体技术应用-概论详解.pptVIP

1．5．3　多媒体同步技术 多媒体同步是指多媒体对象间时间关系的同步。多媒体技术的基本特征是感觉媒体在显示媒体上的表现是同步的，视频信息和音频数据信息进行输入 / 输出、传递、存储和处理时是同步的，不论按哪种算法进行压缩，当音频和视频回放时，必须实现同步输出。因此，多媒体同步技术是多媒体通信的关键技术。 1．5 多媒体系统的关键技术 多媒体信息同步： 分层同步法 时间轴同步法 参考点同步法 多媒体通信同步 时间戳同步法 同步标记法 1．5 多媒体系统的关键技术 1．5．4 多媒体网络通信技术 多媒体网络通信分同步通信和异步通信两种： 同步通信主要在电路交换网络的终端设备间交换实时语音和视频信号，它应能满足人的感官分辨力的要求； 异步通信主要在组成交换网络上异地提供同步信道和异步信道。 多媒体技术与通信技术结合形成了新的应用领域，如视频会议、可视电话、双向电视、电子商务、远程教学、远程医疗等。 1．5 多媒体系统的关键技术 1．5．5 基于内容的检索技术 基于内容的检索(Content Based Retrieval，CBR) 是指根据媒体和媒体对象的内容语义及上下文联系进行检索。 1．5 多媒体系统的关键技术 基于内容检索有如下特点： (1)从媒体内容中提取信息线索 (2)基于内容的检索是一种近似匹配 (3)大型数据库(集)的快速检索 1．5 多媒体系统的关键技术 基于内容的检索包含如下内容： 基于内容的图像检索（Content-Based Image Retrieval，CBIR） 除了利用数据库中描述图像的文字信息，还利用图像的颜色、纹理、形状等特征进行检索和查询。CBIR的关键技术包括：颜色特征提取、纹理特征提取、形状特征提取及相关反馈等技术。 1．5 多媒体系统的关键技术 基于内容的视频检索（Content-Based Video Retrieval，CBVR） 由于视频内容多变且复杂，相比图像其信息量大得多，因此要想在大量的视频数据中找到所需的视频信息是相当困难的。基于内容的视频检索常用关键技术包括：关键帧抽取、镜头分割和视频结构重构等技术。 1．5 多媒体系统的关键技术 基于内容的音频检索（Content-Based Audio Retrieval，CBAR） 它实际上是一种相似查询，它检索出与用户所要查找的非常相似的声音。CBAR的关键技术包括对于包含语音的音频使用的自动语音识别技术和对于不包含语音的音频使用一般的音频分析技术。 1．5 多媒体系统的关键技术 1．6．1　多媒体硬件系统 多媒体硬件系统包括: 计算机硬件设备 音频输入输出和处理设备 视频输入输出和处理设备 多媒体通信设备等。 1．6 多媒体计算机系统 例如:多媒体微型计算机包括: CPU 显示卡与显示器 声卡 视频卡 光驱 触摸屏 多媒体通信设备 其他辅助输入 / 输出设备 1．6 多媒体计算机系统 1．6．2 多媒体软件系统 多媒体软件的主要任务是将硬件有机地组织在一起，使用户能够方便地使用多媒体信息。 包括: 多媒体操作系统 多媒体数据库 多媒体开发工具 多媒体应用软件 1．6 多媒体计算机系统 （1） 多媒体操作系统 操作系统是计算机系统软硬件的控制中心，它以尽量合理有效的方法组织多个用户共享计算机的各种资源。 多媒体操作系统将负责管理系统中的各种资源——包括网络资源，提高资源的可用性和利用率，为用户提供与系统交互的人机界面。 还具有实时任务调度、多媒体数据转换和同步控制机制，对多媒体设备的驱动和控制以及具有图形图像和声音功能的用户接口等。 1．6 多媒体计算机系统 多媒体操作系统一般有两种形式： 专门设计操作系统以支持多媒体功能，如Amiga多媒体计算机系统的Amiga、CD－I 光盘实时操作系统 CD－RTOS； 在原有操作系统的基础上扩充一个支持音频/视频处理的多媒体模块和各种服务工具。如DVI 多媒体软件开发平台 AVSS 就是建立在MS-DOS 的基础上的。 1．6 多媒体计算机系统 （2）多媒体数据库 多媒体数据库（MMDB，Multimedia Database）是一个由若干多媒体对象所构成的集合，这些数据对象按一定的方式被组织在一起，可为其他应用所共享； 多媒体数据库管理系统（MMDBMS，Multimedia Database Management System）是一个以MMDB为基础的多媒体应用，该应用能够完成对MMDB的各种操作及管理功能，如对MMDB的定义、创建、查询、访问、删除等。? 1．6 多媒体计算机系统