机器学习问题分为分类和回归问题 回归问题,就是预测连续型数值,而不像分类问题,是预测离散的类别 至于这类问题为何称为回归regression,应该就是约定俗成,你也解释不通 比如为何logistic regression叫逻辑回归,明明解决的是分类问题,而且和逻辑没有半点关系 谈到回归,最简单的就是...
分类:
其他好文 时间:
2014-09-05 17:45:41
阅读次数:
361
这篇日志也确实是有感而发,我对R不熟悉,但实验需要,所以简单学了一下。发现无论是网上无数的教程,还是书本上的示例,在讲Logistic Regression的时候就是给一个简单的函数及输出结果说明。从来都没有讲清楚几件事情:
1. 怎样用训练数据训练模型,然后在测试数据上进行验证(测试数据和训练数据可能有重合)?
2. 怎样计算预测的效果,也就是计算Recall,Precision,F...
分类:
其他好文 时间:
2014-09-03 22:46:07
阅读次数:
939
线性回归与梯度下降算法作者:上品物语知识点:线性回归概念梯度下降算法 l 批量梯度下降算法 l 随机梯度下降算法 l 算法收敛判断方法1.1 线性回归在统计学中,线性回归(Linear Regression)是利用称为线性回归方程的最小平方函数对一个或多个自变量和因变量之间关系进行...
分类:
其他好文 时间:
2014-09-02 19:26:35
阅读次数:
655
印象笔记同步分享:Machine Learning—Classification and logistic regression...
分类:
其他好文 时间:
2014-09-01 19:41:34
阅读次数:
144
印象笔记同步分享:Machine Learning—Linear Regression...
分类:
其他好文 时间:
2014-09-01 19:41:03
阅读次数:
176
这一课时主要是讲述了线性模型的一些处理。
包括:
1、输入数据的表示(Input Representation)
2、线性分类(Linear Classification)
3、线性回归(Linear Regression)
4、非线性模型转换(Nonlinear Transformation)
作者认为,如果要测试某个模型的可用性,做好就是用真实数据。
为了讲解线...
分类:
其他好文 时间:
2014-08-29 22:42:38
阅读次数:
366
回归(Regression)不同于分类问题,在回归方法中我们预测一系列连续的值,在预测完后有个问题是如何评价预测的结果好坏,关于这个问题目前学术界也没有统一的标准。下面是我在论文中的看到的一些常用方法,希望对有缘人有用。...
分类:
其他好文 时间:
2014-08-27 18:49:08
阅读次数:
4695
L2范数 除了L1范数,还有一种更受宠幸的规则化范数是L2范数: ||W||2。它也不逊于L1范数,它有两个美称,在回归里面,有人把有它的回归叫“岭回归”(Ridge Regression),有人也叫它“权值衰减weight decay”。这用的很多吧,因为它的强大功效是改善机器学习里面一个非常.....
分类:
其他好文 时间:
2014-08-27 12:46:08
阅读次数:
377
Ranklib就是一套优秀的Learning to Rank领域的开源实现,本文基于RanklibV2.1介绍微软流行的LambdaMART模型的训练过程。分四个部分,这是第二章,介绍Regression Tree的训练过程。
分类:
其他好文 时间:
2014-08-24 15:24:22
阅读次数:
366
各种操作系统,试用30天版本下载:点击打开链接
2009年的时候初次了解这个软件,0.7.7版,以及0.80.2还都是免费的,只是觉得好玩而已;
主要因为Connel大学有人在Science上发了一篇report,介绍了类似symbolic regression概念;
后来一直想找出来,可惜忘记软件名字了,一个关键词也想不起来了;一直找不到;
今天翻旧电脑的老硬盘偶然发现还在一个偏...
分类:
其他好文 时间:
2014-08-20 16:25:43
阅读次数:
1131