浅论数据挖掘与文现代化.docVIP

浅论数据挖掘与水文现代化 - 水文＆水资源 1数据挖掘 1.1 数据挖掘技术的产生 随着数据库技术的迅速发展以及数据库管理系统的广泛应用，人们积累的数据越来越多。激增的数据背后隐藏着许多重要的信息，人们希望能够对其进行更高层次的分析，以便更好地利用这些数据。目前的数据库系统可以高效地实现数据的录入、查询、统计等功能，但无法发现数据中存在的关系和规则，无法根据现有的数据预测未来的发展趋势。 用数据库来存储数据，用机器学习的方法来分析数据，挖掘大量数据背后的知识，这两者的结合促成了数据挖掘的产生[1]。数据挖掘是一门交叉性学科，涉及到人工智能、机器学习、数理统计、神经网络、数据库、模式识别、粗糙集、模糊数学等等多个领域。数据挖掘技术包括算法和技术，数据、建模能力3个主要部分[2]。 1.2 数据挖掘的演进过程 数据挖掘其实是一个逐渐演变的过程。电子数据处理的初期，人们就试图通过某些方法来实现自动决策支持，当时机器学习成为人们关心的焦点。尔后，随着神经网络技术的形成和发展，人们的注意力转向知识工程，专家系统就是这种方法所得到的成果。 20世纪80年代，人们在新的神经网络理论的指导下，重新回到机器学习的方法上，并将其成果应用于处理大型商业数据库，而且出现了一个新的术语——KDD(Knowledge discovery in database，泛指从源数据中发掘模式或联系的方法)。人们用KD