分布式数据挖掘系统操作规范研究.docxVIP

分布式数据挖掘系统操作规范研究

目录

一、内容综述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

二、系统架构与运行环境．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

2.1总体逻辑拓扑结构．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

2.2硬件资源配置标准．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

2.3软件栈依赖管理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．8

2.4网络通信协议规范．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．11

三、数据全生命周期治理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．16

3.1多源异构数据接入流程．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．16

3.2数据清洗与预处理策略．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．17

3.3分布式存储划分机制．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．19

3.4数据安全与隐私保护．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．21

四、挖掘算法执