所谓类别不平衡问题就是分类任务中不同类别的训练案例数目差别极其大的情况。不是一般性，我们在这里讨论二分类问题中正例个数远远少于反例的情形。常见的处理非平衡数据集的办法主要有: 1.阈值移动（Threshold Moving）： 通常我们预测类别的方法是学习得到正例概率$P$，如果：\begin{eq ...
分类：
其他好文 时间：
2019-10-13 23:32:17
阅读次数：
162
k近邻算法的Python实现 0. 写在前面 这篇小教程适合对Python与NumPy有一定了解的朋友阅读，如果在阅读本文的源代码时感到吃力，请及时参照相关的教程或者文档。 1. 算法原理 k近邻算法（k Nearest Neighbor）可以简称为kNN。kNN是一个简单直观的算法，也是机器学习从 ...
分类：
编程语言 时间：
2019-10-11 20:00:18
阅读次数：
111
1.准备：使用Python导入数据 1.创建kNN.py文件，并在其中增加下面的代码： 2.在knn.py保存处，shift+右键——‘在此处打开命令窗口’，输入：python，再输入：import knn，导入刚编辑的knn.py模块： 3.为了确保输入相同的数据集，knn模块中定义了函数crea ...
分类：
编程语言 时间：
2019-10-07 11:41:40
阅读次数：
73
简单： 一、手动写一个KNN算法解决分类问题 ...
分类：
编程语言 时间：
2019-10-04 22:32:55
阅读次数：
71
``` Python ''' Created on Sep 16, 2010 kNN: k Nearest Neighbors Input: inX: vector to compare to existing dataset (1xN) dataSet: size m data set of kn... ...
分类：
编程语言 时间：
2019-10-04 15:00:36
阅读次数：
92
本文代码均来自《机器学习实战》 这里讲了两个例子，datingclass 和 figureclass,用到的都是KNN，要调用这两个例子的话就在代码末尾加 和`handwritingClassTest()` 至于第二个例子中用到的图片，是指那种字符点阵的图片，但是对于同样的原理，灰度图片应该也是可以 ...
分类：
其他好文 时间：
2019-10-04 14:54:13
阅读次数：
80
close all;clc; %%算法实现%step1、初始化训练集、测试集、K值%创建一个三维矩阵，二维表示同一类下的二维坐标点，第三维表示类别 trainData1=[0 0;0.1 0.3;0.2 0.1;0.2 0.2];%第一类训练数据trainData2=[1 0;1.1 0.3;1.2 ...
分类：
其他好文 时间：
2019-10-01 18:19:41
阅读次数：
96
在基于TensorFlow的深度学习框架大红大紫之前，流行过很多的经典机器学习框架。比如KNN，比如支撑向量机，比如随机森林。相对于深度学习的理论，这些经典的机器学习算法构建在更为精密的数学推导上。运筹学，最优化理论，数学分析，数理统计和随机过程构成了这些算法的理论基础，也是进一步学习各种基于神经网 ...
分类：
编程语言 时间：
2019-09-29 14:25:46
阅读次数：
175
k-近邻算法（KNN） 将一个32x32的二进制图像矩阵转化为1x1024的向量。 函数img2vector，将图像转化为向量，该函数创建1x1024的数组，然后打开给定的文件，循环读出文件的前32行，并将每行的头32个字值存储在NumPy数组种，最后返回数组。 将这些数据输入到分类器，检测分类器的 ...
分类：
编程语言 时间：
2019-09-28 00:34:29
阅读次数：
103
邻近算法，或者说K最近邻(kNN，k-NearestNeighbor)分类算法是数据挖掘分类技术中最简单的方法之一。所谓K最近邻，就是k个最近的邻居的意思，说的是每个样本都可以用它最接近的k个邻居来代表。kNN算法的核心思想是如果一个样本在特征空间中的k个最相邻的样本中的大多数属于某一个类别，则该样 ...
分类：
编程语言 时间：
2019-09-25 12:29:33
阅读次数：
97
