Linear Regreesion 线性回归属于监督学习，因此方法和监督学习应该是一样的，先给定一个训练集，根据这个训练集学习出一个线性函数，然后测试这个函数训练的好不好（即此函数是否足够拟合训练集数据），挑选出最好的函数（cost function最小）即可。 Cost Function的...
分类：
其他好文 时间：
2014-08-21 22:34:24
阅读次数：
349
网易公开课，第16课 notes，12 前面的supervised learning，对于一个指定的x可以明确告诉你，正确的y是什么 但某些sequential decision making问题，比如下棋或直升机自动驾驶 无法确切知道，下一步怎么样是正确的，因为这是一个连续和序列化的决策，比如直到...
分类：
其他好文 时间：
2014-08-21 18:43:24
阅读次数：
271
真的是应了那么一句话：“行百里者半九十”，原先还曾豪情壮志的想把blog搞得有声有色，得一个“恒”字勋章。现在看来，暑期将尽，更新无多，愧对了自己的那份心情。
好在亡羊补牢，把最近的一些行程做一个简单的总结，荒疏的事情，重新捡起。
6月22-7月14这段时间，基本上是连——沈两地通勤了，没办法了，接了“机器学习导论”这门小学期的课程，也算是一个小的尝试，头一次讲解，马虎不得。课件、作业、程序，...
分类：
其他好文 时间：
2014-08-20 22:43:53
阅读次数：
244
简要介绍EM算法，并使用EM算法求解两个高斯分布的参数估计问题，使用Python实现代码运行。...
分类：
编程语言 时间：
2014-08-20 22:43:13
阅读次数：
1391
Probabilistic Latent Semantic Indexing（PLSI/PLSA）是常用的话题模型之一，他通过生成模型来模拟文档的产生过程，然后用Maximum likelihood的方法估计模型中未知参数的值，来获取整个生成模型中的参数值，从而构建起整个生成模型。...
分类：
其他好文 时间：
2014-08-20 16:32:52
阅读次数：
342
机器学习中的数据不平衡问题最近碰到一个问题，其中的阳性数据比阴性数据少很多，这样的数据集在进行机器学习的时候会使得学习到的模型更偏向于预测结果为阴性。查找了相关的一些文献，了解了一些解决这个问题的一些方法和技术。首先，数据集不平衡会造成怎样的问题呢。一般的学习器都有下面的两个假设：一个是使得学习器的...
分类：
其他好文 时间：
2014-08-20 15:52:02
阅读次数：
229
最近的图像分类工作要用到latent svm，为了更加深入了解svm，自己动手实现一个简单版的。...
分类：
编程语言 时间：
2014-08-19 22:31:15
阅读次数：
378
机器学习十大算法之一：EM算法。能评得上十大之一，让人听起来觉得挺NB的。什么是NB啊，我们一般说某个人很NB，是因为他能解决一些别人解决不了的问题。神为什么是神，因为神能做很多人做不了的事。那么EM算法能解决什么问题呢？或者说EM算法是因为什么而来到这个世界上，还吸引了那么多世人的目光。 我希望自...
分类：
其他好文 时间：
2014-08-19 14:14:24
阅读次数：
180
SVM（支持向量机）是机器学习算法里用得最多的算法。SVM最常用的是用于分类，不过SVM也可以用于回归，我的实验中就是用SVM来实现SVR（支持向量回归）。对于功能这么强的算法，opencv中自然也是集成好了，我们可以直接调用。
网上讲opencv中SVM使用的文章有很多，但讲SVM参数优化的文章却很少。所以在这里不重点讲怎么使用SVM，而是谈谈怎样通过opencv自带的库优化SVM中的参数。...
分类：
其他好文 时间：
2014-08-19 10:57:54
阅读次数：
494
一、逻辑回归（LogisticRegression） Logistic regression （逻辑回归）是当前业界比较常用的机器学习方法，用于估计某种事物的可能性。之前在经典之作《数学之美》中也看到了它用于广告预测，也就是根据某广告被用户点击的可能性，把最可能被用户点击的广告摆在用户能看到的地.....
分类：
其他好文 时间：
2014-08-18 23:28:23
阅读次数：
378
