统计学习基础.pptVIP

统计学习基础 卿来云 中国科学院研究生院信息学院 lyqing@ / lyqing@ 概率 vs. 统计 概率：研究随机事件出现的可能性的数学分支，描述非确定性（Uncertainty）的正式语言，是统计推断的基础 概率： 一个事件或事件集合出现的可能性 基本问题：给定以一个数据产生过程，则输出的性质是什么 统计推断：处理数据分析和概率理论的数学分支，与数据挖掘和机器学习是近亲 统计量：一个用以描述样本或总体性质的数值，如均值或方差 基本问题：给定输出数据，我们可以得到该数据的产生过程的哪些信息 概率 vs. 统计 统计学习 统计学 ≈ 根据数据进行推理的学科 统计学习 ≈多元统计分析 + 计算统计学 多元统计分析 ≈ 基于一个多元变量数据集，预测函数值 计算统计学 ≈ 统计问题的计算方法 (a.k.a. 统计计算) + 计算繁重的统计方法 数据挖掘 ≈ 研究数据分析，尤其是大数据量/复杂的数据集 例：人脸形状（随机事件、概率与统计学习） 统计学习的基本问题 有监督/无监督学习 有监督学习：回归、分类 无监督学习：概率密度估计、聚类、降维 增强学习 模型选择 模型评价：损失函数 模型选择 复杂性 vs. 推广性 课程目的 为计算机专业的学生快速提供广泛的概率和统计背景 概率 统计 统计学习 为学习其他课程打好统计学基础 机器学习 数据挖掘 模式识别 人工智能 …