支持语义的视频检索技术分析-analysis of semantic - supported video retrieval technology.docxVIP

中国科学技术大学学位论文原创性声明本人声明所呈交的学位论文,是本人在导师指导下进行研究工作所取得的成果。除已特别加以标注和致谢的地方外，论文中不包含任何他人已经发表或撰写过的研究成果。与我一同工作的同志对本研究所做的贡献均已在论文中作了明确的说明。作者签名：签字日期：中国科学技术大学学位论文授权使用声明作为申请学位的条件之一，学位论文著作权拥有者授权中国科学技术大学拥有学位论文的部分使用权，即：学校有权按有关规定向国家有关部门或机构送交论文的复印件和电子版，允许论文被查阅和借阅，可以将学位论文编入《中国学位论文全文数据库》等有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存、汇编学位论文。本人提交的电子文档的内容和纸质论文的内容相一致。保密的学位论文在解密后也遵守此规定。□公开□保密(年)作者签名：签字日期：导师签名：签字日期：第1章绪论1.1论文研究背景随着互联网迅速地发展，网络上的多媒体资源越来越多，怎样有效的存储和检索大量的多媒体资源成为信息检索方面的热点问题。很多研究人员和机构开始了相关的研究。网络视频服务吸引了大量的资本投入。视频网站是提供网络视频服务的主力，YouTube是全球最大的视频分享网站，它为全球数亿名用户提供服务。国内的视频网站发展也非常迅速，有走视频分享路线的视频网站，如土豆()、优酷()等，也有走正版视频源路线的视频网站，如奇艺()，还有传统的广播电视台成立的视频网站，如湖南电视台旗下的芒果TV(www.imgo.tv)和中央电视台支持的中国网络电视台()。提供网络视频服务的另外一种形式是交互式电视点播系统VOD(VideoOnDemand)，用户可以通过机顶盒来实现视频节目点播、数字电视广播、电子商务等多媒体信息服务。海量视频数据可以丰富人们的日常娱乐生活，同时我们面临着海量视频数据的分析、存储和检索的问题（谭罗生2004）。如何从这些海量视频数据中检索到人们感兴趣的信息已经成为网络视频服务业务领域需要解决的重要问题。传统的视频服务主要由广播电视行业经营，可以由专业人员进行统一的管理，按照节目表来播放节目。但是传统的视频服务已经无法适应网络视频的大量出现的情况，一方面是人工已经无法管理质量参差不齐的海量视频内容；另一方面，用户需要自己去主动发现和获取视频内容。因此针对海量视频的检索技术得到大力发展。视频检索方式主要归纳为以下两种：基于视频元信息的检索和基于视频内容的检索（Baeza-Yatesetal.1999）。基于视频元信息的检索主要是根据人对于视频内容的理解，使用文本对视频进行描述，但是对于同样的视频，不同背景的人的感受可能大不一样，视频的描述是用人工来完成的，面对网络上大量的多媒体资源，人工实现视频描述的工作量很大，甚至是无法完成的。而且人工实现多媒体资源的描述地检索效率低下(SuZetal.2003)，不能满足人们日常的检索要求。基于内容的图像检索(Content-basedImageRetrieval，CBIR)不同于基于视频元信息的检索，它通过分析和理解多媒体信息的视觉信息，根据得到的多媒体低级特征的匹配来进行检索(张明2002)。基于内容的检索方式可以根据多媒体的视觉信息进行检索，利用多媒体信息的低级特征，但是无法体现多媒体的语义，无法象人一样对于多媒体进行语义理解，提取出多媒体信息的高层语义信息，当前语义检索的重要方向是使计算机分析和理解多媒体的语义信息，实现多媒体信息的语义检索。支持语义的视频检索技术，主要是研究怎样获得视频的高层语义信息，采用何种检索方式对上述的语义信息进行检索，达到检索的高效率和高精度。技术方案上采用MPEG-7的多媒体描述方案，对视频进行语义化标注，建立分布式的全文索引，利用Lucene搜索引擎技术进行检索。我们构建了支持语义的视频检索系统-语寻（Xunet），该系统支持关键词查询、语义图查询和自然语句查询，当用户提交包含语义信息的语句或语义图，语寻系统可以迅速检索到满足用户需求的视频和视频片段，并且提供在线点播的服务，语寻系统可以扩展到100000个节点，每个节点的存储容量支持1T字节；所以可以存储海量的视频资源。该系统综合了自然语言处理技术、Lucene搜索引擎技术和分布式系统技术。该系统的实现提供了一种新的搜索方式-支持语义的视频检索，利用视频的高层语义信息来进行检索。1.2国内外研究现状多媒体检索技术主要包括：基于多媒体元信息的检索和基于多媒体内容的检索，商用的搜索引擎（Baidu；Google）主要采用基于多媒体元信息的全文检索技术，因为网络上的视频大多不是单独出现的，视频内容的描述信息包含在网页中。比如百度视频()是百度汇集互联网上的海量视频资源并建立的视频库，根据《互联网视频开放协议》中规定的视频上传准则，视频网站以XML格式文件将视频