第2讲媒体和媒体技术.pptVIP

第二讲媒体及媒体技术;常见的媒体元素;媒体的种类;人类对信息理解途径;听觉媒体技术 ;声音的量纲 ;声音的心理学量纲： 响度 音调 其它还有音色、和谐、不和谐以及乐音等等 强度增加，响度增加；频率增加，音调增高。 心理学量纲和物理学量纲不能混淆： 这些关系不是线性的，强度加倍不等于响度加倍 这些关系不是孤立的，声音频率的变化既影响音调也影响响度 这些关系不是完全固定的，对于一个音的响度和音调有什么样的知觉取决于出现的情景;听觉心理变量和物理变量的关系;听觉特性 ;（3）临界频带 在频率的某一临界区里，这种声音强度是相互作用的，合成声音的响度由这些频率共同决定。如果超出临界区，声音的响度不再相互作用，随频率而变。这个临界区就是临界频带，其宽度视其中心频率而定。 对于临界频带的确认，使得对声音响度的处理能够有的放矢。 （4）相位 从声音的波形来看，声音的起点和方向也反映声音的特性，这就是声音的相位。当两个声音同方向但相位相反时，它们相互抵消；当两个声音同方向且相位也相同时，声音就会得到加强。 相位的确定在多声道系统的设计中非常重要，它可以应用在回声抵消、会议系统的声音设计上等。 ;（5） 自然声音的时变现象 声音的音调分成3个区域：起始区、稳定状态区和延迟区 研究表明，音调的频谱分量随时间改变。在稳定状态区，频谱保持固定。在起始区，频谱随时间变化。因此自然声音的起始部分是非常难识别的。 对于语音（人的说话，Speech），具有短时平稳性，一般认为5-50ms左右语音信号保持相对稳定一致的特征。对于语音信号的分析和处理是建立的“短时”的基础上。;（6） 听觉空间 人耳可听到来自各个方向的声音，并用不同的因素来决定声源，包括强度、时间和频谱。确定声源的位置无论对于增进人们的感受还是增进对声音的理解都是非常重要的。 方位的线索是各种声音到达两耳的精确时间和强度。声音先到达离声源较近的一耳而且强度较大。声音的定位要靠双重机制，一般低频率主要依靠时差，高频率依靠强度。1-5kHz的频率范围是转换点，在转换点附件定位误差最大 通过声音的精确再现，就可以构造出听觉空间，对于听觉空间的再现在虚拟现实系统中必不可少。 ;（7）听觉的频谱特性 声音是时间函数，通过傅里叶变换可做出其频谱图。人耳对频谱成分的波峰和波谷是非常敏感的。在语言中，元音很少有频谱快速变换的区域。基频改变，人耳是很敏感的 （8）声音的心理模拟 通过仿真的方法，可以对视觉空间的景物进行再造或虚构，也可以对听觉空间的声音进行心理的模拟，就是所谓的可听化（audiolization）。 用声音可以表达出一些特殊效果 。例如：对于虚拟的流体，用声音的高低可以表示流体的粘度，低音表示流体很粘，高音则不粘；用声音的单一频率可表示流体的密度小，而多种频率复合则表示密度大；用冷音色（如笛声）可以表示流体的温度低，而暖音色表示流体的温度较高；用声音脉冲的速度可表示流体的流动速度等等 ;音频的数字化和符号化 （采样、量化和编码） ;讨论;模拟音频信号的采样和重建 ;低通信号的采样定理 ;盎恋乳却眠棺澜帜雷复紫释捣湾护帚涤佰范丘灸塌胀羔罐冬鸟认赛衬斌运第2讲媒体和媒体技术第2讲媒体和媒体技术;采样脉冲序列付氏变换为;泼顿掳舌受饿踏货熏箱翌窗逝彬举叛彰擒姚拦厢兼催毒莹斩犊藻糊炸甸姬第2讲媒体和媒体技术第2讲媒体和媒体技术;由采样后信号恢复原模拟信号----内差公式 ;由时域卷积定理，有：;可看出在 t = nTs 各点上，;带通信号采样 ;;烛押折丙洼娥非危哄澡身衡郎面瞻夏星衬色蹦结叮送途惧丛焰袭券已祷白第2讲媒体和媒体技术第2讲媒体和媒体技术;视觉媒体技术 ;视觉心理特征 ;视觉的心理变量和物理变量对应表;视觉特性 ;（3）视觉的时间特性（视觉惰性） 人眼的视觉是有惰性的，这种惰性现象也称为视像暂留。当眼前实际的景物已经消失后，所看到的影响却不立即消失 。 视觉惰性被人们巧妙地运用到电影和电视中，使得本来在时间上和空间上都不连续的图像，给人以真实的、连续的感觉。在通常的电影银幕的亮度下，人眼的临界闪烁频率约为46Hz。电影中，普遍采用每秒向银幕投射24副画面的标准，而在每副画面停留的时间中，用一个机械遮盖阀将投射光遮挡一次，得到每秒48次的重复频率，使观众产生亮度是连续、不闪烁的感觉。 对于高亮度的显像管而言，临界闪烁频率可能达到60-70Hz。;（4）图像的对比度 对比度表示图像相邻面积或者相邻点之间的亮度差别。对比度C定义如下： ;（5）时间域的掩蔽效应 实验表明，当相邻的画面发生剧烈变化（如场景切换）时，人眼的分辨率会突然下降（下降到原来的1/10）。也就是说当新场景突然出现时，人基本上看不清新景物，大约0.5秒之后，视力才恢复到正常水平。 影响时