大搜索技术白皮书.pdf

Big Search 大搜索技术白皮书 （2015 年） 指导单位： 国家自然科学基金委员会信息科学部 编制人员：方滨兴院士 （主持）、刘克、吴曼青院士、贾焰、陈 熙霖、张兆田、秦玉文、周晓方、王晓阳、林学民、 张彦春、查宏远、黄河燕、李凤华、张宏莉、金海、 景宁、于戈、文继荣、唐杰、李爱平、殷丽华、余翔 湛、李小勇、周斌、韩伟红等 2015 年1 月 版权声明 本白皮书版权属于国家自然科学基金委员会、北京邮电大学、国 防科学技术大学、复旦大学、中科院计算所、中国电子科技集团公司、 清华大学、华东师范大学、苏州大学、中科院信工所、哈尔滨工业大 学、中国人民大学、华中科技大学、东北大学、北京理工大学，并受 法律保护。转载、摘编或利用其它方式使用本白皮书文字或者观点的， 应注明上述来源。违反上述声明者，将追究其相关法律责任。 前 言 当前，随着互联网、移动互联网、物联网等技术的迅猛发展，网络空间也不 断拓展，由互联网扩展到了人、机、物互联的泛在网络空间。互联网应用模式从 Web 1.0 发展到了Web 2.0 和Web 3.0 互联网应用。数据也呈现爆炸性增长的趋 势，极大地推动了全球大数据时代的到来。传统搜索引擎在推动互联网发展，加 快互联网应用的普及过程中，起到了非常重要的促进作用。然而，随着网络空间 极其有用的发展，使得传统的、面向关键字的搜索不能满足用户的搜索需求，搜 索引擎必须进行完全创新性的、颠覆性的、革命性的变革，下一代搜索引擎—“大 搜索” 已呼之欲出。 针对上述需求，北京邮电大学方滨兴院士敏锐地捕捉到了新一代搜索引擎发 展的契机，于2013 年9 月份率先提出了“面向泛在网络空间的智慧搜索” 的概念， 并与国家自然科学基金委员会多次交流沟通。于2014 年1 月在海口组织双清论 坛预备会，召集国内外相关搜索领域的专家对下一代搜索引擎进行了研讨。在充 分论证应用需求和技术成熟度的基础上，国家自然科学基金委员会于2014 年10 月召开了120 期“ 网络空间智慧搜索基础研究”双清论坛，与会专家深刻意识到了 网络空间智慧搜索发展的迫切性，并一致同意方院士提出的将“ 网络空间智慧搜 索”称之为“大搜索”提议，并一致认为我国已经错过了互联网搜索引擎的先机， 在面向泛在网络空间的大搜索引擎的研究上，要抓住机会，力争突破，为引领我 国信息技术的进一步发展，占领IT 技术的战略至高点，奠定坚实的基础。会后， 方滨兴院士邀请了更多国内外相关专家进行研讨，先后组织了“大搜索论坛•威海” 和“大搜索高峰论坛•陵水” 等研讨会，并主持撰写了本白皮书。 参加本白皮书撰写的专家还包括：国家自然科学基金委员张兆田副主任、秦 玉文副主任及刘克处长，中国电子科技集团公司的吴曼青院士，国防科技大学的 贾焰教授、景宁教授、李爱平研究员、周斌研究员和韩伟红研究员，中科院计算 所的陈熙霖教授，苏州大学的周晓方教授，复旦大学的王晓阳和张彦春教授，华 东师范大学的林学民教授和查宏远教授，北京理工大学的黄河燕教授，哈尔滨工 业大学的张宏莉教授和余翔湛教授，中科院信工所的李凤华教授和殷丽华教授， 华中科技大学的金海教授，东北大学的于戈教授，中国人民大学的文继荣教授， 清华大学唐杰副教授等。 本白皮书首先追溯了大搜索的起源，从网络搜索空间的扩展、网络应用模式 的发展及大数据时代的到来等角度探讨了大搜索发展的需求；其次，阐述了大搜 索的内涵，包括大搜索的基本概念、特点和搜索引擎的系统架构；再次，分析了 大搜索的前沿方向，将大搜索重点研究归纳为五个方面：泛在网空间数据获取、 多源融合知识获取、用户搜索意图的理解与表示、智慧解答的在线匹配求解和大 搜索的安全隐私保护；然后，围绕着大搜索在六个主要应用领域的研究及应用展 开了讨论；最后，对大搜索的生态环境和前程进行了展望。 目 录 前 言3 目 录5 第一章 大搜索的缘起6 1.1 网络搜索空间的扩展6