多媒体信息综合检索的关键技术研究计算机应用专业论文.docxVIP

激，冱大学硪士学位论文 激，冱大学硪士学位论文 摘要 摘要 本文以数字图书馆等容纳多种媒体攫型的信息资料库为麻用曰标，总结了当前国内外多 媒傣捡索髅域中最滔跃戆图像检索彝携频捻素(包据技拳路线、档关按末静典型系缭)戆辑 究现状，讨论了数字图书馆对多媒体检索技术所提山的新问题和挑战，并对多媒体信息检索 技术进行了拓展性磺究，重点奔绍了三项关键技术：综台时空特性麴撩关反馈方法，交叉参 照索引的多模态检索方法、以及面向雾媒体文档的多通道检索方法。 本文深入醑究了耀关反馕豹大极交互方法+分孛厅了鏊予瘫骞懿黧豫捡豢审娟关菠镶信息 的时间特性与空间特性，在此基础上酋次提出了一种时空约束支持向量机(TSC．SVM)的 掇关反馈学习方法。在空闯郡融闻维度上有疑终寐的剽蠲用户在嫒豢(掘关反镄戆锤臻)过 程中不断反馈的正例(相关图像)和负俐(不相关图像)信息，达到合理利用相关反馈信息、 准确掌握用户查询需求以及掇态检豢精度的晷蛇。和普避支持爽餐挑方法翊比，该方法§￡蟹 明湿的提高相关反馈的学习能力，提高检索结暴的准确率；同时还能在检索过程中准确实时 的跟踪用户的查询需求，在用户的查询需求发生转移时照得格外宥效。 为实现多种模态数据的综合检索，本文突破传统的文本标注方法，提出了一种多媒体对 象的索引力+法——交义参照索Sl方洼。在该方法中，多媒体对象的索；l就是一照与该多媒体 对象语义相关的多媒体对象。同时，提m了一种全新的多模态检索机制，在检索和柏关反馈 中结合交义参照索引与底层特征，实现对多模态数据的统一处理；另外，还提出，能够有效 提高检索系统的短剃和睦期性能的一种交叉参照索引的自动更新算法。 针对数字幽书馁等异构傣患知识麾的特点，本文提出和实现了一个嚣|鼋多媒体文拶的多 通道(对应如文本、陶像、视频等的多种模态)检索系统{定义了一个新的用来描迷离媒体 文档内容的框架，该梃架不但提取出多媒体文档在器通道F的基，内容的底层特征，两且还 记泵r多嫌体文档中不同多媒体对象间静链接关系；同时，提出了一种基丁-图模型的交叉参 照知识库，用来存储从链接关祭中挖掘出的多媒体对象间的语义关系，通过 个有效的语义 上t-文分丰厅弊法，在检索过程中计算每个对象与资询豹语义相识菠。语义上F文分析葬法不 仅使得基于内容的多媒体信息检索考虑到多媒体对象的语义信息．而且还支持崩户通过通道 韬羧静方式遴{亍相关反赣，撬镶了一种邂为灵活的查询模式。实验表明该系统对多攥体对象 的检索性能优于传统的基于内铎的多媒体检索方法。 关键字：多媒体，信感检索，基于内容的酗像，视频检索，相关反馈．支持向Ⅵ鼹极，多模态 多媒体文档，多通道，语义上下文 澎涯大学磺七学位论文 澎涯大学磺七学位论文 ABS罩RAeT ABSTRACT In this paper,the research on multimedia retrieval(particularly the image／video retrieval)， including fundamental approaches，related techniques，and typical systems，is summarized．nle research issues posed by information retrieval in digital libraries or similar Iarge—scale information repositories are also discussed．The work presented in this paper extends the conventional multimedia retrieval research by proposing three key techniques：a relevance feedback learning method reflecting spatial and temporal characteristics，a cross—reference index aided multi—modal data retrieval mechanism，and multi-channel multimedia documents retrieval and management． The spatial and temporal characteristics of relevance feedback information in content-based image retrieval are