神经网络和遗传算法概述与应用的研究.pdf

数据库技术应用讲座数据库技术应用讲座 神经网络和遗传算法神经网络和遗传算法 概述与应用的研究 主讲人主讲人：：苏苏 丹丹 2014年2月14日 主要介绍以下四方面的内容主要介绍以下四方面的内容：： 1、数据挖掘（DM） 2、人工神经网络（ANN） 33、、遗传算法遗传算法 （（GAGA ）） 44、、基于神经网络和遗传算法的应用简介基于神经网络和遗传算法的应用简介 —— 证券预测技术证券预测技术 一一、、技术的产生技术的产生 随着数据库技术的迅速发展以及数据库管理系随着数据库技术的迅速发展以及数据库管理系 统的广泛应用，人们不再满足于仅从数据库系统实 现数据的录入、查询、统计等功能，希望能够对激 增的数据进行更高层次的分析增的数据进行更高层次的分析，，进而发现数据中存进而发现数据中存 在的关系和规则，根据现有的数据预测未来的发展 趋势趋势。。挖掘数据背后隐藏的知识的手段就成为了改挖掘数据背后隐藏的知识的手段就成为了改 变变 ““数据爆炸但知识贫乏数据爆炸但知识贫乏””现象的现象的 ““杀手锏杀手锏””。。 二二、、数据仓库数据仓库 （（DataData WarehouseWarehouse ）） 数据仓库就是将多个数据源收集的信息存放在一个一致的模式下 可独立成产品可独立成产品，，自己有相对简单的数据分析机制自己有相对简单的数据分析机制。。 可为KDD作数据准备，相当于KDD的数据清理。 注意注意：：KDDKDD可以不需数据仓库而用自己的数据清理模块可以不需数据仓库而用自己的数据清理模块 客户 数据源 清理 数 变换 据 数据源 集成集成 仓仓 查询和分析查询和分析工具具 装入 库 数据源 客户客户 三三、、数据挖掘的定义数据挖掘的定义 数据挖掘（Data Mining）就是从大量的、不 完全的、有噪声的、模糊的、随机的实际应用数据 中中，，提取隐含在其中的提取隐含在其中的、、人们事先不知道的人们事先不知道的、、但又但又 是潜在有用的信息和知识的过程。 数据挖掘定义含义数据挖掘定义含义：：数据源必须是真实的数据源必须是真实的、、大大 量的、含噪声的；发现的是用户感兴趣的知识；发 现的知识要可接受现的知识要可接受、、可理解可理解、、可运用可运用；；并不要求发并不要求发 现放之四海皆准的知识，仅支持特定的发现问题。 何谓知识？ 人们把概念人们把概念、、规则规则、、模式模式、、规律和约束等看作规律和约束等看作 知识，把数据看作是形成知识的源泉。 原始数据可以是结构化的、半结构化的，甚至 是分布在网络上的异构型数据是分布在网络上的异构型数据。。 发现的知识可以被用于信息管理，查询优化， 决策支持和过程控制等，还可以用于数据自身的维 护护。。 四四、、支持数据挖掘的技术基础支持数据挖掘的技术基础 1、对数据挖掘进行支持的三种基础技术： ․海量数据搜集 ․强大的多处强大的多处理器计算机器计算机 ․数据挖掘算法 22、激发数据挖掘开发激发数据挖掘开发、应用和研究的技术理由应用和研究的技术理由：： ․超大规模数据库的出现； ․先进的计算机技术先进的计算机技术； ․对巨大量数据的快速访问； ․对这些数据应用精对这些数据应用精深的统计方法计算的能力的统计方法计算的能力。 五五、、数据挖掘技术的演变过程数据挖掘技术的演变过程 11、、机器学习机器学习 机器学习的过程就是将一些已知的并已被成 功解决的问题作为功解决的问题作为范例范例输入计算