1.逻辑回归 逻辑回归就是这样的一个过程：面对一个回归或者分类问题，建立代价函数，然后通过优化方法迭代求解出最优的模型参数，然后测试验证我们这个求解的模型的好坏。 Logistic回归虽然名字里带“回归”，但是它实际上是一种分类方法，主要用于两分类问题（即输出只有两种，分别代表两个类别） 回归模型中 ...
分类：
其他好文 时间：
2018-12-11 15:58:08
阅读次数：
245
WEEK 3 Logistic Regression Logistic regression is a method for classifying data into discrete outcomes. For example, we might use logistic regression ...
分类：
其他好文 时间：
2018-12-03 15:28:37
阅读次数：
123
假设函数： 更为一般的表达式： （1） 似然函数： （2） 对数似然函数： 如果以上式作为目标函数，就需要最大化对数似然函数，我们这里选择最小化负的对数似然函数 （3） 对J(w)求极小值，对求导 （4） 上述中 表示第i个样本的第j个属性的取值。 于是的更新方式为： （5） 将（5）式带入（4）式 ...
分类：
编程语言 时间：
2018-12-03 01:01:55
阅读次数：
1561
面对复杂的非线性可分的样本是，使用浅层分类器如Logistic等需要对样本进行复杂的映射，使得样本在映射后的空间是线性可分的，但在原始空间，分类边界可能是复杂的曲线。比如下图的样本只是在2维情形下的示例，假设有100维度，即特征数目是100，若使用logistic来做分类，对于这种线性不可分的情形， ...
分类：
Web程序 时间：
2018-11-27 01:37:23
阅读次数：
198
注意： 1.大多情况下使用Relu激活函数这种激活函数计算快，且在梯度下降中不会卡在plateaus（平稳段），对于大的输入，也不会饱和。 2.logistic function和hyperbloic tangent funcation会饱和在1。 ...
分类：
其他好文 时间：
2018-11-23 20:38:29
阅读次数：
130
参考文献：On Discriminative vs. Generative classifiers: A comparison of logistic regression and naive Bayes 生成式模型：model p(x,y)=p(x|y)*p(y) -> Bayes rule预测: ...
分类：
其他好文 时间：
2018-11-23 15:25:46
阅读次数：
224
参考资料： 1.李航《统计学习方法》； 2.https://blog.csdn.net/laobai1015/article/details/78113214 ...
分类：
其他好文 时间：
2018-11-17 17:56:54
阅读次数：
104
逻辑回归案例 小细节 + 逻辑回归（logistic regression）虽然被称之为逻辑回归，但是它本质上其实是一种分类算法（classification algorithm），逻辑回归名字的由来是有历史原因的。 + sigmoid函数在逻辑回归中站着重要的位置，sigmoid function ...
分类：
其他好文 时间：
2018-11-10 12:41:37
阅读次数：
238
Sigmoid函数又叫Logistic函数，它在机器学习领域有极其重要的地位。 目录一 函数基本性质二 Sigmoid函数与逻辑回归三 为什么要选择Sigmoid函数LR的需求选择Sigmoid是可以的Sigmoid特殊的性质为什么选择Sigmoid正态分布解释最大熵解释四 总结 一、 函数基本性质 ...
分类：
其他好文 时间：
2018-11-07 18:39:25
阅读次数：
309
虽然叫做“回归”，但是这个算法是用来解决分类问题的。回归与分类的区别在于：回归所预测的目标量的取值是连续的（例如房屋的价格）；而分类所预测的目标变量的取值是离散的（例如判断邮件是否为垃圾邮件）。当然，为了便于理解，我们从二值分类（binary classification）开始，在这类分类问题中，y ...
分类：
其他好文 时间：
2018-11-07 15:28:24
阅读次数：
175
