Keras神网络基础与逻辑回归详解.pdfVIP

1.2神经网络基础

学习目标

目标

知道逻辑回归的算法计算输出、损失函数

知道导数的计算图

知道逻辑回归的梯度下降算法

知道多样本的向量计算

应用

应用完成向量化运算

应用完成一个单神经元神经网络的结构

1.2.1Logistic回归

1.2.1.1Logistic回归

逻辑回归是一个主要用于二分分类类的算法。那么逻辑回归是给定一个xx,输出一个该样本属于1对应类

别的预测概率。

Logistic回归中使用的参数如下：

输入的特征向量：,是一个维的特征数量，用于训练的：

参数：权重：,偏置：

输出预测结果：

Sigmoid函数：

如果z的结果非常大，那么S的结果接近于1

如果z的结果较小或者是非常大的负数，那么S的结果接近于0

的函数如下

例如：

1.2.1.2逻辑回归损失函数

损失函数（lossfunction）用量预测结果与值之间的误差。最简单的损失函数定义方式为平

方差损失：

逻辑回归一般使用

该式子的理解：