机器学习专题讲义.ppt

* P1 P2 P3 P ？ * P P3 P2 P1 Inputs: Outputs: Input: Output: ??? * 基于heb神经网络的PCA 传统PCA算法的缺点： 需要大量的计算 属于批量学习 基于神经网络的PCA的优点： 不需要计算协方差矩阵 属于在线学习 * 基于hebb规则的权值更新公式： 数据集 基于hebb规则的神经网络已被证明 当迭代次数无穷大时，方差趋向于 NN High dimensional data One dimensional data 64 pages * Sanger proposed the Generalized Hebbian Algorithm (GHA) 多维压缩 64 pages * GHA Learning Algorithm 64 pages * 2维压缩 (Oja Algorithm based on Hebb rules) 第一个输出神经元权值向量 第二个输出神经元权值向量 64 pages * … … 感知机 感知器是用于线性可分模式分类的最简单的神经网络.它由一个具有可调突触权