一种基于内容相关性的跨媒体检索方法.pdf

第31卷第5期 计 算 机 学 报 V01．31No．5 2008 2008年5月 CHINESE OFCOMPUTERS May JOURNAL 一种基于内容相关性的跨媒体检索方法 张 鸿。’2’ 吴 飞2’ 庄越挺2’ 陈建勋 l’(武汉科技大学计算机科学与技术学院武汉430081) 2’(浙江大学人工智能研究所杭州310027) 摘要针对传统基于内容的多媒体检索对单一模态的限制，提出一种新的跨媒体检索方法．分析了不同模态的 内容特征之间在统计意义上的典型相关性，并通过子空间映射解决了特征向量的异构性问题，同时结合相关反馈 中的先验知识，修正不同模态多媒体数据集在子空间中的拓扑结构，实现跨媒体相关性的准确度量．实验以图像和 音频数据为例验证了基于相关性学习的跨媒体检索方法的有效性． 关键词跨媒体检索；异构性；典型相关性，子空间映射}相关反馈 中图法分类号TP391 Cross—MediaRetrievalMethodBasedonContentCorrelations ZHANG Fei∞ZHUANG CHENJian-Xunl’ Hon91’·2’WU Yue—Tin92’ 430081) ScienceTechnology。WuhanUniversityofScience＆Technology，Wuhan 1’(CollegeofComputer 310027) ∞(Institute Univer5ity，Hangz^ot‘ ofArtificial Intetligenc“Zheji。a．ng traditionalcontent—basedmultimediaretrievalmethodsare formultime— AbstractMost designed include retrieval，videoretriev— diadataof methods retrieval，audio singlemodality．Such image chn multime— al，etc．This anovelcross-mediaretrieval process proposes approach，which paper diadataofdifferentmodalitiesandmeasurecross-media as similari— similarity，suchimage—audio low-l