前言 本文是多元线性回归的练习，这里练习的是最简单的二元线性回归，参考斯坦福大学的教学网http://openclassroom.stanford.edu/MainFolder/DocumentPage.php?course=DeepLearning&doc=exercises/ex2/ex2.ht... ...
分类：
其他好文 时间：
2016-07-04 11:39:00
阅读次数：
157
只有一个自变量和因变量的线性回归称为简单线性回归，但是实际上，这样单纯的关系在现实世界中几乎不存在，万事万物都是互相联系的，一个问题的产生必定多种因素共同作用的结果。 对于有多个自变量和一个因变量的线性回归称为多重线性回归，有的资料上称为多元线性回归，但我认为多元的意思应该是真的因变量而非自变量的， ...
分类：
其他好文 时间：
2016-06-26 23:43:22
阅读次数：
233
机器学习教程一-不懂这些线性代数知识别说你是搞机器学习的(2016-04-01)机器学习教程二-安装octave绘制3D函数图像(2016-04-30)机器学习教程三-用scikit-learn求解一元线性回归问题(2016-05-30)机器学习教程四-用scikit-learn求解多元线性回归问题(2016-05-30)机器学习教程五-用..
分类：
其他好文 时间：
2016-06-24 22:23:51
阅读次数：
215
从线性回归到逻辑回归
在第2章，线性回归里面，我们介绍了一元线性回归，多元线性回归和多项式回归。这些模型都是广义线性回归模型的具体形式，广义线性回归是一种灵活的框架，比普通线性回归要求更少的假设。这一章，我们讨论广义线性回归模型的具体形式的另一种形式，逻辑回归（logistic regression）。
和前面讨论的模型不同，逻辑回归是用来做分类任务的。分类任务...
分类：
其他好文 时间：
2016-06-24 15:08:19
阅读次数：
479
线性回归
本章介绍用线性模型处理回归问题。从简单问题开始，先处理一个响应变量和一个解释变量的一元问题。然后，我们介绍多元线性回归问题（multiple linear regression），线性约束由多个解释变量构成。紧接着，我们介绍多项式回归分析（polynomial regression问题），一种具有非线性关系的多元线性回归问题。最后，我们介绍如果训练模型获取目标函...
分类：
其他好文 时间：
2016-06-24 15:08:01
阅读次数：
222
R中的线性回归函数比较简单，就是lm()，比较复杂的是对线性模型的诊断和调整。这里结合Statistical Learning和杜克大学的Data Analysis and Statistical Inference的章节以及《R语言实战》的OLS(Ordinary Least Square)回归模 ...
分类：
其他好文 时间：
2016-06-02 19:57:03
阅读次数：
608
本篇博客主要介绍了简单线性回归，多元线性回归和非线性回归，主要是结合Python和Scikit-learn机器学习库进行相应的分析
目录：
1、概念
2、简单线性回归（Simple Liner Regession）
3、多元性回归（Mutiple Regession）
4、非线性回归（Logistic Regession）...
分类：
其他好文 时间：
2016-04-29 18:56:06
阅读次数：
268
我们已经大概学习了用线性回归（Linear Regression）来解决一些预测问题，详见：
1.《机器学习笔记01：线性回归(Linear Regression)和梯度下降(Gradient Decent)》
2.《机器学习笔记02：多元线性回归、梯度下降和Normal equation》
3.《机器学习笔记03：Normal equation及其与梯度下降的比较》
面对一些类似回归...
分类：
其他好文 时间：
2016-04-28 01:56:56
阅读次数：
510
本篇博客主要介绍了简单线性回归，多元线性回归和非线性回归，主要是结合Python和Scikit-learn机器学习库进行相应的分析
目录：
1、概念
2、简单线性回归（Simple Liner Regession）
3、多元性回归（Mutiple Regession）
4、非线性回归（Logistic Regession）...
分类：
其他好文 时间：
2016-04-26 21:08:02
阅读次数：
225
多元线性回归的最小二乘解（无偏估计） 岭回归(Ridge Regression，RR) 当自变量间存在复共线性时，｜X′X｜≈0，我们设想给X′X加上一个正常数矩阵kI，（k＞0)， 那么X′X+kI接近奇异癿程度就会比X′X接近奇异癿程度小得多。岭回归做为β癿估计应比最小二乘估计稳定，当k=0时癿 ...
分类：
其他好文 时间：
2016-04-23 18:02:04
阅读次数：
128
