农业信息资源整合系统研究与应用.pdfVIP

安徽农业科学,Journal of Anhui Agri .Sci .2007 ,35(22) :6993 - 6994 ,6997 责任编辑 王云平 责任校对 俞洁 农业信息资源整合系统研究与应用 孙素芬, 罗长寿, 张峻峰, 于峰, 张树亮 ( 北京市农林科学院农业科技信息研究所, 北京 100097) 摘要 应 用中间件、元搜索及 网络爬虫等技术与思想构建农业信息资源整合系统, 以期对 已有的农业信 息资源进行整合, 从 而为用户提 供 方便服务。 关键词 农业信 息资源; 整合; 中间件; 元搜索; 爬虫 中图分类号 TP392 文献标识码 A 文章编号 0517 - 6611( 2007) 22 - 06993 - 02 Application and Research of Agricultural Infor mation Resource Integration System SUN Su-fen et al (Institute of Infor mation on Science and Technology of Agriculture , Beij ing Academy of Agriculture and forestry Sciences , Beij ing 100097) Abstract The agricultural infor mation resource integration systemwas constructed by applying the technology of middleware , meta- search and crawler . The system could be used for integrati ng heterostructure agricultural infor mation resource , and providing the convenient services for users . Key words Agricultural infor mation resources ; Integration ; Mi ddleware ; Meta- search ; Crawler 农业信息资源 主要包括农业 网页信息, 涉农 部 门建设 的 2 网络信 息资源整合技术研究 农业数据库 , 以及 专业 数据 库 厂商提供的农业 数据信 息等 。 网络信息资源整合的 目的主要 是通 过构建专业网络信 由于这 些信 息分散在各种 异构 资源 中, 并且在 数据结构、平 息搜索引擎, 迅速 和准确地找 到想要 的农业网络信 息。网络 台及系 统环境等方面有差异性, 需要花费较 高的成本才可达 信息搜索引擎 由网络爬 虫、过 滤器、索 引器和 用户接 口4 个 到满意的查询效果。通 过对农业 异构信息资源 特性的分析 , 部分组成 。 应 用 中间件 、元搜 索及 网络爬 虫等技 术进 行资源 整合, 可提 2 .1 网络爬 虫[ 1- 2] 网络爬 虫的功 能是在 互联 网 中漫游 , 高农业 信息获取的便捷性, 对 于为农业信息用户提供 高效 的 发现和搜集农业 有 关信 息。网络爬 虫 的基本 算法 是 由一组 信息服 务有重大作 用与意义 。 种子URL 开始, 由于主要面 向的是农业 信 息资源, 所 以先人 1 系统总体结构 工确定一些权威 的农业 站 点作为初 始 的爬 行种 子 。网络爬 农业信息资源整合与服 务过程 中主要面对 的信息可 分 虫根据 广度优先策 略爬行, 从种子 URL 集 中取得 一个 URL , 为3 类: 部 门 自建数据资源( 自建的数据 库等)