自动化前沿 第四讲 数据挖掘技术及其应用.pdf

控制科学与工程学系研究生课程 自动化前沿 自动化前沿 第四讲数据挖掘技术及其应用 第四讲数据挖掘技术及其应用 宋执环 宋执环 浙江大学工业控制研究所 浙江大学工业控制研究所 工业控制技术研究所 © Copyright by Song Zhihuan 主要内容 主要内容  数据挖掘概述  数据挖掘概述  数据预处理  数据预处理  数据挖掘算法－分类与预测  数据挖掘算法－分类与预测  数据挖掘算法－聚类  数据挖掘算法－聚类  数据挖掘算法－关联分析  数据挖掘算法－关联分析  序列模式挖掘  序列模式挖掘  数据挖掘软件  数据挖掘软件  数据挖掘应用  数据挖掘应用 工业控制技术研究所 © Copyright by Song Zhihuan 一、数据挖掘概述 一、数据挖掘概述 工业控制技术研究所 © Copyright by Song Zhihuan 数据挖掘概念 数据挖掘概念 数据挖掘--从大量数据中寻找其规律的技 数据挖掘 从大量数据中寻找其规律的技 术，是统计学、数据库技术和人工智能技 术，是统计学、数据库技术和人工智能技 术的综合。 术的综合。  数据挖掘是从数据中自动地抽取模式、关联、变  数据挖掘是从数据中自动地抽取模式、关联、变 化、异常和有意义的结构； 化、异常和有意义的结构；  数据挖掘大部分的价值在于利用数据挖掘技术改  数据挖掘大部分的价值在于利用数据挖掘技术改 善预测模型。 善预测模型。 数据挖掘与KDD 数据挖掘与KDD 工业控制技术研究所 © Copyright by Song Zhihuan 数据挖掘与KDD 数据挖掘与KDD  知识发现（KD）  知识发现（KD）  输出的是规则  输出的是规则  数据挖掘（DM）  数据挖掘（DM）  输出的是模型  输出的是模型  共同点  共同点  两种方法输入的都是学习集（learning sets ）  两种方法输入的都是学习集（learning sets ）  目的都是尽可能多的自动化数据挖掘过程  目的都是尽可能多的自动化数据挖掘过程  数据挖掘过程并不能完全自动化，只能半自动化  数据挖掘过程并不能完全自动化，只能半自动化 工业控制技术研究所 © Copyright by Song Zhihuan 数据挖掘的社会需求 数据挖掘的社会需求 国民经济和社会的信息化 • 社会信息化后，社会的运转是软件的运转 • 社会信息化后，社会的运转是软件的运转 • 社会信息化后，社会的历史是数据的历史 • 社会信息化后，社会的历史是数据的历史 工业控制技术研究所 © Copyright by Song Zhihuan 数据挖掘的社会需求