基于云计算环境的web数据挖掘算法研究.docVIP

基于云计算环境的web数据挖掘算法研究 致谢 5-6 摘要 6-7 ABSTRACT 7 1 引言 10-12 2 云计算和Web数据挖掘技术 12-27 ????2.1 云计算 12-17 ????????2.1.1 云计算的分类和特点 13-15 ????????2.1.2 云计算的应用场景 15-16 ????????2.1.3 云计算技术的研究现状 16-17 ????2.2 云计算的关键技术 17-22 ????????2.2.1 数据存储领域的核心技术 17-19 ????????2.2.2 数据管理领域的关键技术 19-20 ????????2.2.3 编程模型领域的关键技术 20-22 ????2.3 Web数据挖掘概述 22-27 ????????2.3.1 Web Graph及其应用 23-25 ????????2.3.2 社交网络服务(Social Network Service) 25-27 3 Web Graph数据的获取与展示 27-37 ????3.1 Web Graph挖掘的数据结构和存储方案 27-30 ????????3.1.1 Web Graph算法使用的数据结构 27 ????????3.1.2 Web Graph数据的存储方式 27-30 ????3.2 Graph数据的抓取 30-33 ????????3.2.1 申请Facebook应用程序 30-31 ????????3.2.2 开发Facebook应用程序获取用户关系 31-33 ????3.3 Graph数据的形象化展示 33-36 ????3.4 本章总结 36-37 4 Graph挖掘算法 37-46 ????4.1 Graph直径求解算法设计 37-44 ????????4.1.1 Graph的直径 37-38 ????????4.1.2 算法思想分析 38-41 ????????4.1.3 OptimDM算法的优化实现 41-44 ????4.2 OptimDM算法的性能分析 44-45 ????4.3 本章总结 45-46 5 算法仿真实验与应用分析 46-59 ????5.1 Hadoop平台的搭建 46-51 ????????5.1.1 Hadoop平台与OptimDM算法 46-48 ????????5.1.2 单节点Hadoop环境的搭建 48-49 ????????5.1.3 多节点分布式运行Hadoop 49-50 ????????5.1.4 基于Elicpse的MapReduce开发环境 50-51 ????5.2 算法的仿真和性能测试 51-57 ????????5.2.1 传统单节点环境的图直径求解实验 52-53 ????????5.2.2 集群环境中OptimDM算法的实验 53-57 ????5.3 OptimDM算法的应用 57-58 ????5.4 本章总结 58-59 6 总结和展望 59-60 参考文献 60-63 作者简历 63-65 学位论文数据集 65 一种基于云计算的数据挖掘平台架构设计与实现 摘要 2-3 Abstract 3 第一章 引言 6-8 ????1.1 课题研究目的与意义 6-7 ????1.2 国内外研究现状 7 ????1.3 论文各部分的内容安排 7-8 第二章 云计算平台 8-14 ????2.1 云计算定义 8 ????2.2 云计算特点 8-9 ????2.3 云计算与网格计算的对比 9-10 ????2.4 云计算架构 10-11 ????2.5 现有云计算平台简介 11-14 第三章 数据规约工具的设计与实现 14-21 ????3.1 数据规约工具设计 14-16 ????3.2 数据规约工具实现 16-21 ????????3.2.1 数据定义规范 16-19 ????????3.2.2 基于DOM的XML解析方法 19-21 第四章 基于云计算的数据挖掘系统架构 21-29 ????4.1 目标系统模型 21-22 ????4.2 功能层次框架设计 22-23 ????????4.2.1 算法层 22-23 ????????4.2.2 应用层 23 ????????4.2.3 用户层 23 ????4.3 设计要点 23-29 ????????4.3.1 插件系统框架 23-25 ????????4.3.2 开放接口设计 25-29 第五章 基于云计算的数据挖掘系统实现 29-39 ????5.1 系统开发环境 29-30 ????5.2 系统开发关键思想与技术 30-31 ????????5