分布式并行信息检索相关技术研究概要1.docxVIP

分布式并行信息检索相关技术研究张青峰南开大学信息技术科学学院 天津 300071摘要当今社会， 爆炸性增长的网络信息不但给用户提供了丰富的知识来源, 同时也给检索系统带来了巨大的挑战。并行技术和分布式技术是解决这种大规模信息检索问题的关键技术，分布式并行信息检索是分布式并行计算技术在信息检索领域的应用。本文介绍了并行检索技术和分布式检索技术的基本概念、原理和方法，并对信息检索中的查询性能预测进行了介绍，主要论述了查询性能预测的主要方法和关键技术，最后讨论了分布式并行信息检索面临的一些挑战，并对未来的研究工作进行了展望和分析。关键字信息检索,并行检索，分布式检索，查询性能预测引言当今社会，爆炸性增长的网络信息不但给用户提供了丰富的知识来源, 同时也给检索系统带来了巨大的挑战。在信息爆炸的大数据时代，搜索引擎索引页面通常能够达到几十亿个到上百亿个,虽然单台计算机的处理能力不断提高，但是要对大规模海量的信息数据进行检索，单台计算机的处理能力毕竟有限，传统的基于单机的集中式信息检索技术已无法满足这种以大规模数据集为基础的并发多用户信息检索的需求，因此特别需要多台计算机进行“团队作战”。而并行计算和分布式计算能够利用多台计算机或者多个处理器的计算或存储资源来解决大规模数据问题。因此，很自然地会想到将并行处理或者分布式处理技术引入到信息检索当中，由此产生了分布式并行信息检索技术。分布式并行信息