UFLDL教程.pdf

UFLDL 教程-深度神经网络 说明：本教程将阐述无监督特征学习和深度学习的主要观点。通过学习，你也将实现多个功能学 习/深度学习算法，能看到它们为你工作，并学习如何应用/适应这些想法到新问题上。 本教程假定机器学习的基本知识 第一章.稀疏自编码器 1. 神经网络 以监督学习为例，假设我们有训练样本集 ，那么神经网络算法能够提供一种复 杂且非线性的假设模型 ，它具有参数 ，可以以此参数来拟合我们的数据。 为了描述神经网络，我们先从最简单的神经网络讲起，这个神经网络仅由一个“神经元”构成，以 下即是这个“神经元”的图示： 这个“神经元”是一个以 及截距 为输入值的运算单元，其输出 为 ，其中函数 被称为