优化多媒体信息的多媒体化简方法汇总.docxVIP

优化多媒体信息的多媒体化简方法 严唯戚 计算机科学系 加利福尼亚大学尔湾分校 CA 92697-3425 Mohan S. Kankanhalli 计算机科学系 新加坡国立大学 新加坡117543 我们提出了一种新的转码技术，称为多媒体的简化，这是根据经验抽样。多媒体简化有助于优化多媒体信息服务（多媒体信息服务）信息的合成。转码是有用的，克服这些紧凑的设备的局限性。所提出的方法的目的是减少在多媒体数据捕获的多媒体传感器的冗余度。简化的数据首先被存储到一个库中，以供进一步使用。一旦收到了一个请求的多媒体，多媒体的多媒体应用，使使用的简化媒体从画廊。多媒体数据是对齐的时间线的信息合成。我们证明了所提出的技术的应用，即足球视频和家庭护理监控视频。发送到接收器的多媒体可以基本上反映用户感兴趣的重要事件的要点。我们的技术是针对对用户有兴趣通过移动设备获得显着的多媒体信息?? 1。简介 移动电话已经成为我们生活中不可或缺的一部分。现在，他们集成了多媒体设备，如摄像头，扬声器，收音机和麦克风。虽然主要是促进远程对话，它还提供了额外的服务，如文本通信，游戏，音频/视频播放，广播，图像/视频采集和传输，闹钟，计算器和日历。最近，发送和接收的多媒体信息服务（多媒体信息服务）的消息， 作者地址：新加坡国立大学计算机科学学院，3，驱动2，新加坡117543的许可费没有个人或课堂上使用提供的副本不会制作或分发利润或商业优势使这种材料的全部或部分的数字或硬拷贝，ACM版权/服务器通知的发布标题，和出现的日期，并通知的复制是ACM的许可，公司以其他方式复制、转载、发布的服务器上，或分配清单需要事先特定的权限和/或费用。 2魏齐燕和Mohan S. Kankanhalli 具有比短信（短消息服务）短信更高的信息承载能力，吸引了上百万的爱好者。一个彩信图片和音频在传递信息比单纯的单词和句子更有效。文字说明还可以帮助输送的MMS消息的内容。彩信是一个自动化的PowerPoint幻灯片。多媒体演示，包括音乐，声音，图像，文字，和图形的元素，以及在同一时间线同步。当MMS消息显示，表示–看上去像一个精心设计的幻灯片显示的图像（摄影、动画和声音，开始运行）。因此，一个消息的基本元素是一个幻灯片，整个信息由这样的幻灯片序列组成。幻灯片图像、文本和音频组件，组织在一个SMIL表达时空布局方式。一个彩信目前可以将大小为300 KB /幻灯片多媒体组件（虽然没有限制规定的标准）这是足够的查询、通信和娱乐用途。关于MMS标准进一步的细节可以从。 3G手机还没有广泛使用。其结果是，标准的移动电话是主要的平台，用于发送和接收来自多媒体数据的多媒体通信网络。它只能作为一个播放设备的音频和图片组件的多媒体信息，它不允许交互。此外，巨大的多媒体数据的大小，使其通过无线通道缓慢传输。我们需要充分利用有限的内存来嵌入最关键的信息，可以表达我们的意图。手机使用的局限性包括： ?由于无线通信的窄带宽； ?有限屏幕分辨率和音频功能； ?可用内存空间相对较少； ?数据存储和传输速度慢，通过二级机制，如蓝牙和红外端口； 这些问题不太可能与3G手机消失由于允许彩信的大小也会相应增加。因此，视频是不允许被插入到彩信–需要分成一解序列的静止图像和音频剪辑之前被插入彩信。另一方面，一个高质量的数字图像，如照片、图形和电子地图已被压缩，调整大小或裁剪，以符合设备的局限性。减少数据的大小与最小的伴随损失的信息是非常有价值的信息合成。 压缩是减少数据大小的一个明显的方法。然而，压缩技术是不能够选择性地识别最重要的内容，在一个消息。压缩技术往往通过降低统计工作，编码和感知冗余。因此，我们引入简化的概念。我们定义的过程中，选择的语义最重要的部分的媒体数据的多媒体简化。在这个意义上，它是不同于压缩的，它的目的是最小化“语义冗余”。 经验抽样[ Kankanhalli等人。2006 ]概括的概念，它可以应用到多个相关的媒体流的关注。它引入了“注意饱和”的概念，这是一个衡量的重要性，在一个媒体框架。它已被成功地用于视频演示文稿在小设备[王等。2004 ]。经验抽样技术的力量在于它能够从不同的方式，使用统一的过程中的数据进行汇总/简化的数据。体验式采样系统是一个自适应的采样系统，它不同于用于视频摘要[ DeMenthon等技术。1998 ]。在本文中，我们利用这一技术来进行简化的文本，音频和运动的图片，并保留最重要的信息，每一个流。这可能是文本的关键句子，一个图片的关键区域和非无声区域的音频剪辑。 多媒体化简与摘要的关系是很不一样的。它试图把媒体流的语义最突出的方面。简化的重点是提取的多媒体数据的语义显着性，同时总结了最大的数据减少，在语义最小损失。因此，简化是始终在语义上有损保留的一个给定的数据大小约束的最突出的方面。它有