第3章 素材幻灯片.ppt

数字媒体资产管理 第3章 素材 刘士军 lsj@ 摘要 素材是不同形式和格式内容的物理表示，不同用途的素材需要使用大量的用于不同目的的素材格式，一个理想的内容管理系统应当独立于媒体和格式 内容管理系统并不仅是一个存储文件的仓库，它还必须理解文件结构、媒体语法、甚至特定部分的语义；提供媒体索引、自动信息检索和流媒体等功能和服务 内容管理系统除了对素材进行单纯的管理外，还可以通过自动检索来获得内容的附加信息，实施编辑点检测，浓缩版本生成，转码处理等 本章内容 3.1 素材的不同形式 3.2 编码和压缩基础 3.3 视频 3.4 音频 3.5 图片、网页、文本和其他素材格式 3.6 素材的处理 1. 素材的不同形式 基本素材元素 结构化素材格式 高码率和浏览格式 基本素材元素 基本素材元素是素材的基础组成部分，内容一般会被表示为特定的基础素材类型，例如音频、视频、图像、图形和文本等 素材元素可以根据它们的时间和表示特征进行分类。总的来说，分为离散型（非时相关）和连续型（时间相关）媒体 一个连续的媒体流由连续的、与时间相关的信息单元描述，这种与时间的相关性是指媒体（或其不同部分）对于用户的呈现。基本的连续媒体素材元素有视频、音频和运动图形 离散媒体没有内在的时间要求，其表示的内容也与呈现时间无关，如文本、图像和图形 结构化素材格式 在结构化素材格式中，基本素材元素或其他结构化素材元素通过引用和链接组合在一起。例如网页、XML文档和多媒体文件 结构化素材格式间的关系不仅由明显的引用来建立，还可以由不同基本元素相联系的时间约束来建立 管理结构化素材格式的挑战在于保持它们所表示信息的有效性和连续性 需要考虑基本模块可能会被重新部署和改变；必须明确地管理结构化素材对象的外部链接，防止可能导致内容对象的不一致操作 例：基于扩展SMIL的多媒体信息展示 数字博物馆中大量的馆藏相关的文字、音频、视频、三维模型、全景图等多媒体资源需要在网络中进行全方位同步展示 W3C制订的推荐标准SMIL语言 ──(Synchronized Multimedia Integration Language)通过基于XML的标记语言，表述各种媒体对象之间的同步关系，目前得到了广泛的认可 基于Java语言自主开发的支持文本、图像、音频、视频、全景图、SVG图形与三维模型等丰富媒体类型的SMIL展示工具 /class/class_2/showsmil/class_2.htm 基于扩展SMIL的多媒体信息展示 SMIL示例：全景图 利用Java编制一个可以解析和播放全景图信息的类并融合到整个系统中，在适当的时候调用这个类里面的方法对SMIL文件进行解析，获得全景图元素的信息 在该元素定义的有效时间段内，用全景图类里面的方法在屏幕上展现出来 可以在 SMIL文件定义中自如的加入需要展示的全景图元素 例如：“pano src=”pano/school.jpg“ region=”pano_001“ begin=”0.3s“ scroll=”L“ speed=”1“ /” 这句话的含义是将预先准备好的全景图片“pano/school.jpg”在0.3秒的时刻在“pano_001”区域出现，而且默认的滚动方向是向左，滚动速度为1 高码率和浏览格式 是否选用高码率格式是由质量、制作、广播和存档等方面的要求来决定的 对低码率格式的需求来自于初选、浏览等工作 在一典型的处理视音频材料的工作流中，对视频内容的初选是基于关键帧的。通过对所选视音频片断的低码率副本的浏览（听和看）来具体选择特定的内容 因为需要快速访问浏览材料，浏览信号应当高度压缩以节省网络带宽和存储空间 需要能够根据系统能力提供相应质量水平的可调比特率编码 浏览交换格式——浏览的基本要求 EBU和SMPTE（Society of Motion Picture and Television Engineers,电影与电视工程师学会）发表了一份浏览交换格式(Browsing Interchange Format, BIF) 目标是阐明低码率浏览格式所必须满足的条件 BIF用于媒体专业人员的浏览和选择，须具备以下基本特征： 视频（准确的帧和时码以及颜色） 双声道音频 与内容有关的元数据（包括访问权限、IPR管理和保护信息） 与材料有关的元数据（时码、唯一ID等） BIF应当支持流和文件传输，而且应当提供技术功能以支持促进至少2种常用的浏览模式：编辑决策列表(Edit Decision List，EDL)和非常窄带浏览，64kb/s的数据率应当足以满足这种应用场合 2. 编码和压缩基础 波形和抽样 压缩 比特率 数字化 什么是信号的数字化？ 例：音频信号 声音信号在空气、液体和固体中是通过介质的振动传播的 音频信号可以转化为电、磁