码迷,mamicode.com
首页 > 其他好文 > 详细

对数回归的成本函数

时间:2017-07-23 18:10:31      阅读:172      评论:0      收藏:0      [点我收藏+]

标签:成本   span   style   gis   c函数   src   blog   font   bsp   

对于线性回归,我们不能使用相同的成本函数,因为logistic函数会导致输出波动,导致许多局部最优解。换句话说,它不是一个凸函数。

相反,我们的逻辑回归的成本函数看起来像:

技术分享

 

当y = 1,我们得到如下图J(θ)与H(θ)

技术分享

 

 

当y = 0,我们得到如下图J(θ)与H(θ)

 

技术分享

 

技术分享

 

如果我们的正确答案y是0,那么如果我们的假设函数输出0,则代价函数为0。如果我们的假设接近1,那么代价函数将接近无穷大。
如果我们的正确答案y是1,那么如果我们的假设函数输出1,代价函数将是0。如果我们的假设接近0,那么代价函数将接近无穷大。
注意写作的成本函数,这样保证了J(θ)是Logistic回归。

 

对数回归的成本函数

标签:成本   span   style   gis   c函数   src   blog   font   bsp   

原文地址:http://www.cnblogs.com/zhengzhe/p/7225296.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!