面向web图片检索的文本和图片信息融合技术研究-计算机软件与理论专业毕业论文.docxVIP

湘潭大学 学位论文原创性声明 本人郑重声明：所呈交的论文是本人在导师的指导下独立进行研究所 取得的研究成果。除了文中特别加以标注引用的内容外，本论文不包含任 何其他个人或集体已经发表或撰写的成果作品。对本文的研究做出重要贡 献的个人和集体，均已在文中以明确方式标明。本人完全意识到本声明的 法律后果由本人承担。 作者签名： 日期： 年 月 日 学位论文版权使用授权书 本学位论文作者完全了解学校有关保留、使用学位论文的规定，同意 学校保留并向国家有关部门或机构送交论文的复印件和电子版，允许论文 被查阅和借阅。本人授权湘潭大学可以将本学位论文的全部或部分内容编 入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存和汇 编本学位论文。 涉密论文按学校规定处理。 作者签名： 日期： 年 月 日 导师签名： 日期： 年 月 日 湘潭大学硕士论文 湘潭大学硕士论文 面向 web 图片检索的文本和图片信息融合技术研究 I I 摘要 随着互联网的发展，人类大步迈入信息时代。互联网使人们足不出户就能阅 读到世界各国的信息，更使得人们可以在弹指挥手间不受时间和地域的限制获取 想要的信息。互联网已经成为人类最大的数据库、知识交换的重要平台、信息共 享的重要途径。互联网上可获取的信息已从简单的文本信息，全面扩展到图像、 视频、音频、图形等各种多媒体信息。因此如何从这浩瀚数据海洋中检索出用户 感兴趣的图片是一个非常具有挑战性的任务。 与此同时，多媒体对象之间呈现出了跨媒体的特征，主要表现在多种类型媒 体数据混合并存、组织结构复杂，而且往往不同类型的媒体数据从各个侧面表达 了同一语义。媒体对象间的这些跨媒体特点要求我们进行web图片检索中能够充 分考虑到这些特点，并合理加以利用。也就是需要对于多种模态的媒体对象进行 融合分析，挖掘出它们之间潜在的语义联系，以语义为桥梁，在检索时实现多媒 体之间的融合。本文针对图像与文本之间的关系，在通过文本信息实现图像检索 的基础上，引入图像自身的内容信息之间的相似性，实现文本与图像的融合，使 达到更好的检索效果。 本文提出了一种文本和图片相似性矩阵融合的方法。它是根据计算得到文本 相似性矩阵和图片相似性矩阵，把两个矩阵水平拼接在一起形成一个大的相似性 矩阵，这是一个矩阵级别的相似性融合，也是本文作者对融合的一次新的尝试， 然后对融合以后的相似性矩阵进行联合聚类，使得聚类以后的结果融合文本信息 和图片信息。 本文还提出了一种错误驱动融合的方法。它是利用文本研究的成熟技术，提 出了一个基于文本相似性联合聚类，再利用图片联合聚类结果去修正最终结果。 并且通过实验验证了本文提出的两种融合方法比单一使用其中一种对媒体信息 进行聚类的效果要好。 本文还实现了一个有效的、扩展性良好的面向 web 图片检索的文本和图片 信息融合系统，并通过实验验证了系统的有效性，为以后进一步深入研究打下了 良好的基础。 关键词： 多媒体融合、特征提取、联合聚类、web 图片检索、语义相似性 II II Abstract With the development of the Internet, human beings are stepping into the information age. Internet makes it possible to read information all over the world without going outside, and to obtain the desired information easily without restrictions of time and region. Internet has already become the largest database and an important platform for knowledge exchange. Internet information has developed from simple text information to multimedia information of images, videos, audios, and graphics and so on. So how to retrieve images that users are interested in from this vast ocean of data is a very challenging task. At the same time, multimedia objects have shown the characteristics of cross-media. It means: the data from