多媒体技术课程整理..docx

第一章多媒体导论1.1什么是多媒体概念：多媒体技术是由使用多模态技术（包括文本、图像、图形、动画、视频和音频等，以及交互活动）的应用程序构成的。1.3.2~5HTTP：超文本传输协议（HyperText Transfer Protoco），一种”无状态”的请求/响应协议。HTML：超文本标记语言（HyperText Markup Language），用来在World Wide Web上发布超媒体信息的语言XML：可扩展标记语言（Extensible Markup Languag），定义文档中的标记（结构）以及他们之间的关系。SMIL：同步多媒体集成语言（Synchronized Multimedia Intergration Language）SMIL的基本目标和主要功能：支持对不同多媒体元素的调度和同步，并定义这些元素和用户之间的交互。第二章多媒体编著和工具2.1 sprite animation分镜（精灵）动画假设我们已经创造了一个动画图，那么可以很容易地得到一位（黑-白）的掩模M，并得到分镜S;现在我们可以将这个分镜覆盖在彩色的背景B上：先将B和M作“与”运算，然后将得到的结果和S作“或”运算，将这些简单的操作组合以一定的速率执行，就可以生成一个简单的二维动画。Video transition视频切换常用的切换类型包括：剪切、擦拭、融化、淡入（出）剪切，顾名思义，是在两个连续的视频帧之间执行对图像内容的剧烈变化。这是最为简单也最为常用的切换方式。擦拭是用另一段视频中的内容来代替可视区域的像素。如果两个视频的边界在屏幕中缓慢移动，那么第二段视频将逐渐替代第一段视频。方式有从左到右，从上到下、钟表式等等。融化的方式用两段视频的混合来代替原图中的像素，以实现两段视频之间的渐变。融化分为交叉融化和抖动融化两类。在第一类（交叉融化）中，像素点是渐变的，它可以被定义为：D=(1-α(t))·A +α(t)·BA和B是表示视频A和B的三元颜色向量。α(t)是颜色切换的函数，通常它和时间t具有线性关系：α(t) =kt，ktmax≡1第二类（抖动融化）则完全不同，根据α(t)，视频A中的像素点将突然被视频B所取代，这种变化是非连续的。变化的像素点的位置可以是随机的，也可以遵循一定的模式。很明显，淡入淡出是第一类融化方式（视频A或B为黑色（或白色））的特例，而擦拭是第二类融化方式（采用某种几何模式来改变像素的特例）。2.3 VRML什么是VRML，全称，干什么的Virtual Reality Modeling Language，虚拟现实建模语言VRML是用来在Web环境中创建3D环境的工具，目标是将有色彩的对象置于3D环境中。第三章图形和图像的数据表现3.1.1 二值图像图形的每个像素作为一个位存储（0或者是1），是1位单色图像。3.1.2 8位灰度图像图像的每个像素有一个在0~255之间的灰度值。每个像素由一个字节表示，政府图像可以看作由像素值组成的二维数组，即位图（bitmap）。3.1.4 24位彩色图像在一个24字节的彩色图像中，每个像素用三个字节表示，通常表示为RGB。伪彩色：使用了查找表概念来存储颜色信息，基本上，图像存储的不是颜色而仅仅是字节的组合，每个字节是指向一个表的索引。该表表项具有三字节值，指明了带有查找表索引的像素的颜色。颜色查找表通常被称为调色板（palette）。3.2.3 PNG 基本技术特点（针对GIF）最多可支持48位的色彩信息。文件可能还包含用于正确显示彩色图像的伽马校正信息以及用于透明控制的阿尔法通道信息。与GIF基于宽展行的渐进显示不同，PNG的显示在7通道上对图像的每个8X8块一次同时在二维空间显示一些像素。3.2.7 PS和PDF 了解，是干什么的PostScript，用于排版的重要语言，PS文件是用ASCII保存的，本身没有提供压缩。Portable Document Format，便携式文档格式中包含了LZW压缩。第四章图像和视频中的颜色4.1.6 伽马校正干什么的图像文件中的RGB数值被转换回模拟信号并驱动阴极射线管（CRT）中的电子枪。电子的发射与驱动电压成正比，并且我们希望CRT系统产生的光线与电压线性相关。但是CRT产生的光线实际上与典电压的指数大致呈正比，这个指数称为“gamma”（伽马），符号为γ。如果文件在红色通道的值是R，则屏幕发射的光线与 R?成正比。通常是对需“伽马校正”的信号在发射前将其指数变为1/γ，这样，我们就有：R→R’= R??→(R’) ?→R 因此可以获得“线性信号”。4.1.12 XYZ RGB Lab 为什么提出这些颜色模型XYZ:为了产生与设备无关的颜色,通过与设备相关的颜色值RGB来指定(x,y)色度值来协商解决L*a*b(CIELAB):要