大工20春人工智能课程设计答案.pdfVIP

大工20春人工智能课程设计答案 学习中心： 专 业： 年 级： 年 春/秋 季 学 号： 学 生： 题 目： 人工智能课程设计（回归算法） 1.谈谈你对本课程学习过程中的心得体会与建议？ 经过半年的网上学习，我对人工智能这门课程有了初步的认识，人工智能这 门课程内容新颖，涉及计算机知识非常广，学习起来极富挑战性。在学习过程中 我始终跟随老师视频讲解，严格要求自己，收获很大。老师的讲解深入浅出，在 学识知识的同时，也激发了我的学习兴趣。我由衷的感谢老师的教导，感谢老师 们不辞辛苦录制课件，感谢自己能获得这次宝贵的学习机会。 2. 《人工智能》课程设计, 从以下5个题目中任选其一作答。 大工20 春人工智能课程设计答案 《人工智能》课程设计 题目二：回归算法 要 求：（1）撰写一份word 文档，里面包括（常见的回归算法、 基于实例的算法具体细节）章节。 （2 ）常见的回归算法包括：最小二乘法（Ordinary Least Square ），逻辑回归（Logistic Regression ），逐步式回归 （Stepwise Regression ），多元 自适 应 回归样 条 （Multivariate Adaptive Regression Splines）以及本地散点 平滑估计 （Locally Estimated Scatterplot Smoothing ），请选 择一个算法描述下算法核心思想 （3 ）随意选用一个实例实现你所选择的回归算法。 答： （1）最小二乘法算法核心思想 最小二乘法原理如下： 根据一组给定的实验数据 ，求出自变量x 与因变量y 的函数 关系，只要求在给定点 上的误差 的平方和 最小. 当 时，即 (1) 这里 是线性无关的函数族，假定在 上给出一组 数据 ， 以及对应的一组权 ，这里 为权系 数 ， 要 求 使 最 小 ， 其 中 (2) 大工20春人工智能课程设计答案 (2)中 实际上是关于 的多元函数，求I 的最小值就是求多 元函数I 的极值，由极值必要条件，可得 (3) 根据内积定义引入相应带权内积记号 (4) 则(3)可改写为 这是关于参数 的线性方程组，用矩阵表示为 (5) (5)称为法方程.当 线性无关，且在点集 上至多只有n个不同零点，则称 在X上满足Haar条件，此时(5)的解 存在唯一。记(5)的解为 从而得到最小