尚机器学习综述.pptx

机器学习综述讲师：武玉飞

机器学习是啥？机器学习(MachineLearning,ML)是一门多领域交叉学科，涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为，以获取新的知识或技能，重新组织已有的知识结构使之不断改善自身的性能。通过算法使计算机能够模拟人类的判别能力

机器学习能干啥？

机器学习有啥？无监督学习有监督学习深度学习强化学习迁移学习传统学习人工智能回归推荐聚类分类挖掘推荐神经网络卷积神经网络AlphaGO………….

机器学习怎么用？

数据集、测试集、训练集、维度、特征

泛化、过拟合、欠拟合

模型和学习模型就是复杂的数学相关函数，只是该函数具有很多的未知的参数，通过训练集训练来确定模型中的参数，生成的已知参数的函数就是模型。就是一种映射学习就是根据业务数据构建模型的过程。

损失函数通过模型预测的预测值与真实值只差产生的函数

查全率（召回率）、查准率（正确率）实际1实际0预测1TruePositive(TP)FalsePositive(FP)预测0FalseNegative(FN)TrueNegative(TN)某池塘有1400条鲤鱼，300只虾，300只鳖。现在以捕鲤鱼为目的。撒一大网，逮着了700条鲤鱼，200只虾，100只鳖。那么，这些指标分别如下：正确率=700/(700+200+100)=70%召回率=700/1400=50%

评估参数MSE:MeanSquaredError?

均方误差是指参数估计值与参数真值之差平方的期望值;?

MSE可以评价数据的变化程度，MSE的值越小，说明预测模型描述实验数据具有更好的精确度。RMSE?

均方根误差:均方根误差是均方误差的算术平方根MAE:MeanAbsoluteError?

平均绝对误差是绝对误差的平均值?，平均绝对误差能更好地反映预测值误差的实际情况.fi表示预测值,yi表示真实值;SD:standardDeviation?

标准差:标准差是方差的算术平方根。标准差能反映一个数据集的离散程度。平均数相同的两组组数据，标准差未必相同。

SparkMllib是啥？