Motivation 问题描述 收集到某一地区的房子面积和房价的数据(x, y)42组,对于一套已知面积的房子预测其房价? ? ? 由房价数据可视化图可以看出,可以使用一条直线拟合房价。通过这种假设得到的预测值和真实值比较接近。 Model 模型 将现实的问题通过数学模型描述出来。 m 个 样本(e ...
分类:
其他好文 时间:
2018-01-15 13:30:37
阅读次数:
236
Motivation 问题描述对于一些问题标签值只有两个(1,0),而线性回归模型的输出值是一定范围的连续值。这时的做法是人为规定一个阈值0,当预测值大于0时判为1,预测值小于0时判为0.?上图对应的线性回归假设函数hypothesis为(特征的维数是2)\[h_\theta(x)=-3+x_1+x... ...
分类:
其他好文 时间:
2018-01-15 12:39:27
阅读次数:
103
$$\theta_1 := \theta_1 \alpha\frac 1 {2m}\sum_{i=1}^m(h_\theta(x^{(i)}) y^{(i)})\cdot{x^{(i)}}$$ } 问题描述 对于一些问题标签值只有两个(1,0),而线性回归模型的输出值是一定范围的连续值。这时的做法是 ...
分类:
其他好文 时间:
2018-01-13 20:42:06
阅读次数:
206
一、什么是回归? 孩子的身高是否与父母有关? 实际上,父母和孩子的身高是受到回归效应影响的。在时间纵轴上受影响、具有随机性的事物,无不遵循这一规律。 只要数据足够大,人类的身高或者智商,都有趋于平均值的回归性。 1.1 回归与函数逼近 function approximation or regres ...
分类:
其他好文 时间:
2018-01-13 14:13:03
阅读次数:
135
机器学习实战四(Logistic Regression) 这一章会初次接触 ,在日常生活中应用很广泛。这里我们会用到基本的梯度上升法,以及改进的随机梯度上升法。 Logistic回归 优点:计算代价不高,易于理解和实现 缺点:容易欠拟合,分裂精度可能不高 原理:根据现有数据堆分类边界线建立回归公式, ...
分类:
其他好文 时间:
2018-01-10 16:54:25
阅读次数:
178
逻辑回归(Logistic regression): 想要理解LR,只需要记住: Sigmoid 函数: y=1/(1+e-z) 线性回归模型: y=wTx+b 最后: y= 1/(1+e-(wTx+b)) 推导为: ln (y/1-y)=wTx+b 它就是用线性回归模型的预测结果去逼近真实标记的对 ...
分类:
其他好文 时间:
2017-12-29 12:24:58
阅读次数:
164
一、不包含分类型变量 from numpy import genfromtxtimport numpy as npfrom sklearn import datasets,linear_modelpath=r'D:\daacheng\Python\PythonCode\machineLearning ...
分类:
其他好文 时间:
2017-12-26 00:51:48
阅读次数:
177
一、回归和分类 回归(regression)y变量为连续数值型(continuous numerical variable),如房价,降雨量。 分类(classification)y变量为类别型categorical variable。如颜色类别,电脑品牌等。 二、统计量:描述数据特征 2.1集中趋 ...
分类:
其他好文 时间:
2017-12-25 00:54:48
阅读次数:
148
先来说说回归的思想吧: 常见的回归就是通过一系列的点,计算得到一条线。当有新的输入时,可以直接计算得到输出。用最小二乘法求解线性回归方程就是我们最早接触到的回归。对于线的表示都不尽相同,如线性回归得到的预测函数是y=w? T?x? +a,逻辑回归则是一条S型曲线。 逻辑回归和线性回归(Linear ...
分类:
其他好文 时间:
2017-12-22 15:55:52
阅读次数:
167
逻辑回归(logistic sinmoid):将线性函数的输出压缩进区间(0,1)。 逻辑回归 机器学习算法与Python实践之(七)逻辑回归(Logistic Regression) 支持向量机(support vector machine):和逻辑回归类似,但不输出概率,只输出类别。 支持向量机 ...
分类:
其他好文 时间:
2017-12-19 01:25:02
阅读次数:
122