基于Oracle组件的数据采集与全文检索系统设计与优化.docVIP

基于Oracle组件的数据采集与全文检索系统设计与优化 摘要：从应用系统数据采集与全文检索的需求出发，结合权 限控制，提出基于 0racle Transparent Gateway, Oracle Text 的数 据采集与全文检索的设计和实现方案。基于此方案，着重进行系 统框架设计、采集存储及数据库设计,实现创建索引及检索流程, 最后给岀系统性能优化方法，并对检索速度和查准率进行测试分 析。目前系统已上线运行，取得高效简捷、运行稳定的使用效果。 关键词：数据采集；Oracle Transparent Gateway； 全文 检索；Oracle Text；性能优化 中图分类号：TN911734；TP392 中图分类号：TN911734； TP392 文献标识码: A文章编 号:1004?373X (2016) 08?0037?04 Design and optimization of data acquisition and fuIRtext retrieval system based on Oracle component YUAN Qinqinl, LI Zhixun2, L? Lintaol (1. Department of Electronic and Information Engineerings Xijing University, Xi an 710123, China； 2. Xi an Aerospace Propulsion Test Technique Institute, Xi an 710100, China ) Abstract: Proceeding from the requirements of data acquisition and full?text retrieval for the application system, and in combination with the access control , the design and implementation scheme of data acquisition and full?text retrieval based on Oracle Transparent Gateway and Oracle Text is proposed. Based on this scheme, the system structure design, collection storage and database design are conducted emphatically. The index creation and search procedure were realized? At the end of this paper, the optimization method of system performance is given, and the retrieval speed and precision ratio of the system are analyzed? Now the system has been run on line, and achieved the using effect with high efficiency and stable running? Keywords： data acquisition； Oracle Transparent Gateway； full?text retrieval； Oracle Text； performance optimization o引言 随着信息化建设的不断推进以及信息技术的快速发展，为适 应多元化业务发展需要，多个业务系统随之建设，产生了大量的 以不同方式存储、依赖于不同数据库管理系统的数据。例如业务 数据分别存储在SQL Server, Oracle数据库中［1］,在这些异构数 据库［2］平台上运行着业务相关的多种应用系统。如何在不影响 现有系统运行的前提下，最大限度地利用信息资源，避免重复开 发，必须解决异构数据库的统一操作问题。如何快速有效地采集 异构数据库中的信息，建立综合信息资源库，实现数据共享，是 本文需要解决的问题之一。另外，面对综合信息资源库中的大量 数据，怎样在业务应用中实现快速、有效、全面的检索效果，提 高数据的利用性，也是本文需要解决的另一问题。 本文围绕基于J2EE技术架构的多个业务应用系统开展研究, 其信息来源十分广泛，包括现有的业务管理系统、文件系统、文 档资料等。而各个系统的数据存储方式、存储结构、数据库类型 均不相同，如何在异构的存储环境下实现稳定可靠的数据共享和 数据采集是本文设计的要点之一。同时