科研管理数据挖掘平台的设计与实现分析-通信与信息系统专业毕业论文.docxVIP

万方数据 万方数据 A Dissertation Submitted in Partial Fulfillment of the Requirements for the Degree of Master of Engineering Design and Implementation of Data Mining Platform for Scientific Research Management Candidate： Feng Chenglin Major： Communication and Information System Supervisor： Prof. Wang Yuming Huazhong University of Science and Technology Wuhan, Hubei 430074, P. R. China Jan, 2014 独创性声明 本人声明所呈交的学位论文是我个人在导师指导下进行的研究工作及取得的研 究成果。尽我所知，除文中已经标明引用的内容外，本论文不包含任何其他个人或集 体已经发表或撰写过的研究成果。对本文的研究做出贡献的个人和集体，均已在文中 以明确方式标明。本人完全意识到本声明的法律结果由本人承担。 学位论文作者签名： 日期： 年 月 日 学位论文版权使用授权书 本学位论文作者完全了解学校有关保留、使用学位论文的规定，即：学校有权保 留并向国家有关部门或机构送交论文的复印件和电子版，允许论文被查阅和借阅。本 人授权华中科技大学可以将本学位论文的全部或部分内容编入有关数据库进行检索， 可以采用影印、缩印或扫描等复制手段保存和汇编本学位论文。 本论文属于 保 密□，在 年解密后适用本授权书。 不保密□。 （请在以上方框内打“√”） 学位论文作者签名： 指导教师签名： 日期： 年 月 日 日期： 年 月 日 华 华 中 科 技 大 学 硕 士 学 位 论 文 摘 要 随着科研管理工作的信息化，科研管理各类数据快速增长和积累，海量科研管理 数据远远超出科研管理人员的理解和分析能力，传统的统计技术和数据管理工具已经 无法满足科研管理人员的数据分析需求。 各种不同类型面对海量的数据，科研管理人员希望开展分析，挖掘其中蕴含的价 值，有效地利用这些数据。然而，现有的科研管理数据分析，其工作重心仅在于“统 计”，“分析”功能局限，不能有效服务于管理决策咨询。为了实现对科研管理数据的 深入分析，本文构建了一个简便、高效、可扩展的数据挖掘平台。 各种不同类型 本文首先对科研管理数据分析的现状进行调研，了解当前数据分析中存在的不 足，并结合数据挖掘领域中的理论，梳理出数据挖掘平台的需求；然后采用 B/S 模式， 基于 Java EE 框架，以 Oracle 数据库作为数据仓库，以开源的 Lucene 全文检索引擎 和 Mahout 机器学习框架作为数据分析与挖掘工具，以 D3 和 Highcharts JS 作为数据 可视化工具，按照软件工程的流程，完成了数据挖掘平台各部分的分析、设计与实现； 最后，对平台进行整体测试和应用分析，以确保各功能模块的准确性和健壮性。本数 据挖掘平台基于开源框架开发，极大地加快了平台的开发周期，提升了平台的可移植 性、可扩展性和可维护性。 关键词：数据挖掘；数据仓库；机器学习；数据可视化 I II万方数据 II 万方数据 Abstract With informationization of scientific research management, various kinds of scientific research management data is being increased and accumulated rapidly. The massive data is far beyond the understanding and analysis ability of scientific research managers, and traditional statistical techniques and data management tools have been unable to meet the data analysis needs of scientific research managers. Faced with massive data, scientific research managers expect to achieve new heights of data analysis, then more valuable information will be digged, and data