数据挖掘概念、技术与商业应用20125.pdf

数据挖掘概念、技术与商业应用 刘海飞 副教授、博士 hfliu@ 南京大学南京大学金融金融工程研究中心程研究中心 2012.5 汇报目录 1. 数据挖掘的内涵与体系 2. 数据挖掘实施流程与挖掘技术 • 数据挖掘实施流程 • 数据挖掘工具 • 挖掘数据预处理 • 数据挖掘技术 3. 数据挖掘案例—商业银行营销分析 2 数据挖数据挖数据挖数据挖掘基掘基本概本概本概本概念念 1、从大量的数据中提取人们所 感兴趣的感兴趣的、事先不知道的事先不知道的、隐含隐含 客观世界 在数据中的有用的信息和知识的 过程； 知识 数据 2、并且把这些知识用概念、规 则、规律和模式等方式展示给用 户户 ，从而解解决信息信息时代的“数据 数据挖掘数据挖掘 数据库数据库 过量，知识不足” 的矛盾。 3 数据挖掘任务与目标数据挖掘任务与目标 发生了什么？ 为什么会发生？ 将来还会发生吗？ 4 数据挖数据挖数据挖数据挖掘进掘进化路径化路径化路径化路径 数据库管理系统 （20世纪70年代） 数据收集与数据库创建 ——网络和关系数据库系统 （20世纪60年代或更早） ——数据建模工具 ————基础文件处理基础文件处理 ————索引和数据组织技术索引和数据组织技术 ——查询语言和查询处理 ——用户界面与优化方法 ——在线事务处理（OLAP） 先进数据库系统、数据仓库和数据挖掘 （20世纪80年代至今） 新一代信息系统 ——现今数据模型（扩展关系、面向对象、 （2000年以后） 对象关系对象关系 ）） ——面向应用（空间、时间、多媒体、知 识库） 5 数据挖掘体系架构数据挖掘体系架构 数据挖掘数据挖掘体系体系 ：： 数据清理集成 数据挖掘处理 抽取转换 各类数据库各类数据库 挖掘前处理模块