机器学习 | LR公式

Posted AI算法攻城狮

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了机器学习 | LR公式相关的知识,希望对你有一定的参考价值。

逻辑回归本质上是线性回归,只是在特征到结果的映射中加入了一层逻辑函数g(z),即先把特征线性求和,然后使用函数g(z)作为假设函数来预测。g(z)可以将连续值映射到0 和1。g(z)为sigmoid function.

sigmoid function 的导数如下:

逻辑回归用来分类0/1 问题,也就是预测结果属于0 或者1 的二值分类问题。这里假设了二值满足伯努利分布,也就是

其也可以写成如下的形式:

对于训练数据集,特征数据x={x1, x2, … , xm}和对应的分类标签y={y1, y2, … , ym},假设m个样本是相互独立的,那么,极大似然函数为:

以上是关于机器学习 | LR公式的主要内容,如果未能解决你的问题,请参考以下文章

机器学习 LR中的参数迭代公式推导——极大似然和梯度下降

算法工程师(机器学习)面试题目3---机器学习算法

机器学习15 逻辑回归与交叉熵

机器学习15 逻辑回归与交叉熵

机器学习15 逻辑回归与交叉熵

机器学习 | LR逻辑回归模型