码迷,mamicode.com
首页 > 其他好文 > 详细

关于逻辑回归与线性回归

时间:2020-04-17 09:20:58      阅读:70      评论:0      收藏:0      [点我收藏+]

标签:csdn   托马斯   微积分   参考   完全   情况   ref   inf   定义   

参考:https://blog.csdn.net/weixin_39445556/article/details/83930186

https://blog.csdn.net/weixin_39445556/article/details/81416133

对应线性回归的概率解释(当然线性回归还有代数解释--参考线性代数第5章)

假设每行样本的目标值y ,由W‘ X 决定,那么w,x 定下来后,y就是会在 均值在 w x =u 附近变化,而且是呈正太分布的,

那么这些样本 的联合概率P(y1,y2....)的规律最大化时对应的W就是外面要找的,回归系数。--参考上面的链接

 

对应logistic回归,回归函数改成下面的g(z)--这个参考托马斯微积分第6章,6解人口Euler方法

然后每个样本属于正例(正例是人为规定的)的概率就是g(z), 并且每个样本是否属于正例的概率是p=g(z)--参考下文图中的定义 ,明显 不属于的概率是1-p即 1-g(z)

由于是伯努利分布(0,1分布),所以出现当前这N个样本情况的联合分布概率是,这N行样本分布概率的乘积(考虑各样本--各记录独立)

并且当这个概率最大时对应的那一组W就是需要的回归系数。

这里假设每行(每个样本)的p都不一样,但是这个p由 W‘X  完全确定,X是特征(列属性取值),W‘是要确定的回归系数。

技术图片

技术图片

关于逻辑回归与线性回归

标签:csdn   托马斯   微积分   参考   完全   情况   ref   inf   定义   

原文地址:https://www.cnblogs.com/wdfrog/p/12717371.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!