高维稀疏数据的相关性度量方法地研究.pdfVIP

苴型丝i益贸易．厶堂擅!亟2±堂僮睑塞 g商维箍疏数坦凶扭去世度量五：迭班冠＆ 高维稀疏数据的相关性度量方法研究 摘要 本文研究内容聚焦于稀疏数据的相关性度量理论与方法。文章从基础理论入手， 首先拓展了统计结构的概念。通过定义显示变量，将一般样本空间转化为稀疏样本空 间，并继续定义了在稀疏样本空间上的沪代数和概率测度，从而引出了稀疏统计结构， 在理论上对稀疏数据进行了详细解释。然后总结并提出了一些实际应用中，比较有用 的度量稀疏数据相关性的方法与理念。例如将信息熵的思想引入相关性度量，使用归 一化的熵值来衡量相关性，同时又提出了稀疏相似路径的理念，探讨一种间接求解相 关性的方法。最后，本文设计了一个协同过滤算法作为实验平台，并采集了相应的实 验数据，通过缺失值插补方法，在稀疏数据上进行推荐评分，以此对一些常见的相关 性度量方法进行实证分析。 关键词：稀疏统计结构 显示变量 信息熵 相似路径 协同过滤 苴崮丝邕鞋显复厶堂埴土唆L￡堂鱼丝童——一。 g高维猛疏数蜓的±Ⅱ羞：吐度量左法监左＆ Researchof Correlation Measurement Theory on Data High—-Dimensional Sparse Abstract Ihis IS foCUS paper onthe and mainly methodofcorrelation theory measurementof data-Theresearch sparse startsfromfundamental theory the of byexpanding conception StatisticalFramework．It convertsa normal intoa sample bv space sparse samplespace aVisual defining toa Variable．And，leadStatisticalFramework Sparse deftning through the and measure0n a-algebraprobability sparse outan samplespace．Therefore，that gives detailed of data explanation sparse summarizesand theoretically．Moreover,it out gives severalmethods and of correlationmeasurements thoughts of datain sparse empirical works·Suchasintroduce intothe entropy correlation measurement，andmeasures correlation a standardized by entropyvalue．Furthermore，thisanideaof paperpresents correlation sparse ansolutionof path，that indirectcorrelation．In exploring thelast．the paper acollaborative as designed an filteringalgorithm andcoilected experimentplatform anexperimentdataset．Basedon recommendationon these，making data sparse by tomake mmsing’value an interpolation．Hoping ofseveralcorrelation comparison measurements by empiricalstudy． Key Statistical Words：SparseFramework，Visual of Variable，Entropylnformation． Correlation Path，Collaborative Filtering ¨ 苴都丝猛贸易厶堂监!亟2±堂僮论塞 《高维猛蓝数据的扣去世度量五：迭班宜＆ 目录 第一章 绪论……………………………………………………………………………………………．．I §1．1 稀疏数据………………………………………………………………………………………1 1．1．1稀疏数据概述…………………………………………………………………………一1 1．1．2稀疏数据的来源与种类………………………………………………………………．．1 1．1-3稀疏数据相关概