中文自动问答系统探讨.docVIP

精品论文 参考文献 中文自动问答系统探讨 黄莉 （宝鸡文理学院，陕西宝鸡 721007） 摘要：中文自动问答系统是网络高速发展的必然产物。论文从自动问答系统的定义入手，系统的研究了它的关键技术，并对其应用前景和发展趋势做了预测。 关键词：自动问答系统；信息检索；答案生成 中图分类号：TP271 文献标识码：A 文章编号：1007-9599 (2010) 05-0000-02 Chinese Question-Answering System Huang Li (Baoji University of Arts and Science,Baoji 721007,China) Abstract:The Chinese question answering system is the inevitable product of the rapid development of the network.Papers from the start with the definition of automatic question answering system,the system of its key technology and its applications and development trend forecast. Keywords:Automatic answering system;Information retrieval;Answer generated 一、引言 随着科学技术的高速发展，“信息爆炸时代”已经来临。同时由于网络技术的快速发展及Internet的大规模普及，人们可以快速高效的获取大量的信息。但是当面临具体问题时虽然人们可以通过网络搜索技术获取大量的信息，但如何从海量的信息中找出自己所需要的具体信息却十分困难。如何快速、高效的获取用户所需的准确信息是当前研究的一个热点。通过简单的研究或发展单纯的搜索技术已经很难取得长足的进步，因此必须发展自动问答系统。特别是面向中国市场的中文自动回答系统。 二、关键技术研究 自动问答系统是融合了计算机语言学、信息科学以及人工智能等多项技术为一体的智能自然语言处理技术。它通过用户采用自然语言作为输入，自动问答系统系统通过搜索、综合，提供给用户一个准确的答案，人们就能通过该系统高效、快速的获取特定的信息。虽然自动问答系统较复杂，但通过分析，我们可以得出，系统主要涉及到三部分的内容：问题分析、信息检索以及答案生成。问题分析就是通过对用户问题的分析获取问题的关键部分，对问题进行理解，为搜索准备关键词。信息检索一般都是通过借助于现有的搜索技术如百度、谷歌来检索信息的，也可通过开发自己的搜索技术来从网络海量的信息中检索出指定的信息。答案生成就是从搜索引擎搜出的海量网页中提取并进行适当的组装从而为用户提供准确而简洁的答案。 在问题分析部分主要涉及到：问题分类、关键词提取、问题相关扩展。在该部分主要涉及到分词、名实体识别、词性标注和组块分析等。对于中文自动问答系统来说，主要的一个问题就是中文自动分词。它涉及到汉语分词基础表、汉语分词规则、汉语分词算法。由于汉语和英语有很大的不同，基于英文的分词方法很难直接应用于汉语中。目前，常见的中文分词法主要有机械分词法、统计分词法、知识分词法以及神经网络分词法等。其中机械分词法就是通过采用以分词词典为模进行字符串模式匹配来实现分词操作。该方法算法简单、实现方便、也能保证一定的分词效果，但计算量太大、效率不高，缺乏实用性。统计分词法就是基于统计字间相邻的频率来判定是否为一个词，该方法适用于较大规模的系统，并且需要前期的大量参数训练，具有一定的智能性，是未来研究的一个重要方向。知识分词的核心就是知识推理。采用预设的知识库并结合推理技术来自动完成分词操作。该方法的难点主要是知识库的建立和补充。就人们在人工智能和知识库已有技术来看，现在实现基于知识库的分词还要克服许多困难，故目前还不具有实用性。神经网络分词法就是采用神经网络系统来实现分词操作。它通过模拟人脑思维过程，分布处理和建立数值计算模型，将分词知识用隐式的方法存入神经网络内部，通过自学习和训练修改内部权值，以获得正确的分词结果。该方法具有分词准确、高效的特点，但实现较复杂，并且目前还存在一些未解决的问题，是分词法发展的一个主要方向。 在问题分析部分还有一个较关键的部分就是问题相关扩展。它早在上个世纪70年代就被提出来了，主要有3类方法：全局分析法、局部分析法和局部上下文分析法。其中，全局分析法通过对所有文档中的词或词组采用相关度分析，从而实现扩展的一种方法。主要采用词聚类法、相似性词典法等方法来实现的，该方法效果较好，但不具有实用性，因为当系统太大时就无法实用了。 由于搜索技术的发展异