大数据相关分析综述-JiyeLiang.PDFVIP

网络出版时间：2015-09-29 08:24:20 网络出版地址：/kcms/detail/11.1826.TP0824.002.html 第38 卷 计 算 机 学 报 Vol.38 2015 论文在线出版号 No.94 CHINESE JOURNAL OF COMPUTERS Online Publishing No.94 大数据相关分析综述 1) 1),2) 1,3) 梁吉业 , 冯晨娇 , 宋鹏 1)( 山西大学计算智能与中文信息处理教育部重点实验室 太原 030006 ） 2)(山西财经大学应用数学学院 太原 030006 ） 3)(山西大学经济与管理学院 太原 030006 ） 摘 要 大数据时代, 相关分析因其具有可以快捷、高效地发现事物间内在关联的优势而受到广泛的关注, 并有效地应用 于推荐系统、商业分析、公共管理、医疗诊断等领域. 面向非线性、高维性等大数据的复杂特征, 结合现有相关分析方法的 语义分析, 本文从统计相关分析、互信息、矩阵计算、距离四个方面对大数据相关分析的现有研究成果进行了梳理. 在对统 计学中的经典相关分析理论进行归纳、总结的基础上, 文中从大规模数据的通用性和均等性视角阐述了基于互信息的两个 变量间非线性相关分析理论, 从高维数据可计算的角度分析了基于矩阵计算的相关系数, 从非线性、高维性数据的复杂结构 方面解析了基于距离的相关系数. 进一步地, 本文在对已有相关分析方法进行分析与比较的基础上, 围绕高维数据、多变量 数据、大规模数据、增长性数据及其可计算方面探讨了大数据相关分析的研究挑战. 关键词 大数据; 相关分析; 相关系数; 信息熵 中图法分类号TP18 论文引用格式 梁吉业，冯晨娇，宋鹏，大数据相关分析综述，2015 ，Vol.38 ：在线出版号No.94 LIANG Ji-Ye ,FENG Chen-Jiao ,SONG Peng, A Survey on Correlation Analysis of Big Data, Chinese Journal of Computers,2015, Vol.38: Online Publishing No.94 A Survey on Correlation Analysis of Big Data LIANG Ji-Ye1), FENG Chen-Jiao1),2), SONG Peng1),3) 1)(Key Laboratory of Computational Intelligence and Chinese Information Processing of Ministry of Education, Shanxi University, Taiyuan 030006) 2)(Scho