机器学习(四):逻辑回归

逻辑回归通过使用逻辑函数来估计概率,从而测量分类独立变量与一个或多个非独立变量之间的关系,而逻辑函数就是所谓的累积逻辑分布.

从更多的数学观点来看,逻辑回归比线性回归对数据有更加强烈的假设:

逻辑回归是判别模型,因此可以直接学习p(y|x):

所有的数学计算过程如下:

使用MLE或者MAP进行权值估计:

损失函数——交叉熵损失

Q: 学习率与交叉熵损失函数之间的关系是什么?

发布了36 篇原创文章 · 获赞 39 · 访问量 19万+
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章