aai09知识发现和数据挖掘0高级人工智能史忠植.pptVIP

2020/4/3 史忠植 高级人工智能 31 数据仓库平台： OLAP 的实现 2020/4/3 史忠植 高级人工智能 32 元数据的内容 ? 关于外部数据源的 ? 关于内部数据的（包括数据库、表、字段的信息） ? 关于数据仓库的（包括事实表、维表、立方以及 其它的中间表） ? 关于用户信息的 ? 关于算法（包括算法的参数信息） ? 关于采掘任务的（包括采掘步骤、每个步骤的所 用的参数） 2020/4/3 史忠植 高级人工智能 33 数据挖掘集成工具： 结构 数据挖掘集成工具结构示意图 数据仓库平台 任务编辑 任务规划 和执行 算法库 算法管理 元数据 任务模型库、算法描述 2020/4/3 史忠植 高级人工智能 34 数据挖掘集成工具： 数据挖掘任务模型 Step1 Step2 Step4 Step3 Step5 DMTask = (V , R) V = {x | x ∈ StepObjects} R = {x, y | P(x, y) ∧ x, y ∈ V} 2020/4/3 史忠植 高级人工智能 35 数据挖掘集成工具： 数据挖掘任务模型 步骤对象 BNF 语法定义： StepObject ::= Attribute_List;Method_List Attribute_List ::= [Attribute|Attribute;Attribute_List] Attribute ::= Name,Value Method_List ::= [Method|Method;Method_List] Method ::= Name,Script Name ::= [char|string] Value ::= [char|string|integer|float] Script ::= DML_Sentence* 2020/4/3 史忠植 高级人工智能 36 数据挖掘集成工具： 编辑任务模型 ? 任务向导 2020/4/3 史忠植 高级人工智能 37 数据挖掘集成工具： 编辑任务模型 ? 任务编辑图板 2020/4/3 史忠植 高级人工智能 38 数据挖掘集成工具： 处理任务模型 人机界面 主控模块 规划器 解释器 缓存 函数库 黑板 任务模型库 数据采掘任务处理引擎的结构 2020/4/3 史忠植 高级人工智能 39 数据挖掘集成工具： 处理任务模型 任务规划和解释执行 S1 S3 S2 S4 S5 S1 - S2 - S3 - S4 - S5 2020/4/3 史忠植 高级人工智能 40 数据挖掘集成工具： DML 语言 DML 函数 ? 人机交互和控制台输入 / 输出 ? 数值计算 ? 字符串处理 ? 图形、图表展示 ? 文件操作 ? 数据库访问 ? 网络通讯 ? 对象访问 ? 消息处理和流程控制 ? 黑板操作 ? 外部功能调用 ? 其它辅助功能 2020/4/3 史忠植 高级人工智能 1 第九章 知识发现和数据挖掘 数据挖掘工具 MSMiner 史忠植 中科院计算所 2020/4/3 史忠植 高级人工智能 2 主要内容 ? 研究背景 ? MSMiner 体系结构 ? 元数据 ? 数据仓库平台 ? 数据采掘集成工具 2020/4/3 史忠植 高级人工智能 3 典型的知识发现系统 (3) ? SAS 公司的 SAS Enterprise Miner ? IBM 公司的 Intelligent Miner ? Solution 公司的 Clementine ? DataEngine ? DBMiner ? 中科院计算技术研究所的 MSMiner 2020/4/3 史忠植 高级人工智能 4 知识发现工具 SAS(1) SAS 公司的 SAS Enterprise Miner 是一种通用的 数据挖掘工具。通过收集分析各种统计资料和客 户购买模式， SAS Enterprise Miner 可以帮助您 发现业务的趋势，解释已知的事实，预测未来的 结果，并识别出完成任务所需的关键因素，以实 现增加收入、降低成本。 2020/4/3 史忠植 高级人工智能 5 知识发现工具 SAS(2) ? SAS Enterprise Miner 提供 抽样 - 探索 - 转换 - 建 模 - 评估 (SEMMA) 的处理流程。数据挖掘算法有： · 聚类分析， SOM/KOHONEN 神经网络分类算法 · 关联模式 / 序列模式分析 · 多元回归模型 · 决策树模型 (C45, CHAID, CART) · 神经网络模型 (MLP, RBF) · SAS/STAT ， SAS/ETS 等模块提供的统计分析模型 和时间序列分析模型也可嵌入其中。 2020/4/3 史忠植 高级人工智能 6 知识发现工具 Intelligent Miner IBM