1. Scikit-learn Scikit-learn 是基于Scipy为机器学习建造的的一个Python模块，他的特色就是多样化的分类，回归和聚类的算法包括支持向量机，逻辑回归，朴素贝叶斯分类器，随机森林，Gradient Boosting，聚类算法和DBSCAN。而且也设计出了Python n ...
分类：
编程语言 时间：
2017-08-16 14:06:01
阅读次数：
285
3.3 Spark在预测核心层的应用 我们使用Spark SQL和Spark RDD相结合的方式来编写程序，对于一般的数据处理，我们使用Spark的方式与其他无异，但是对于模型训练、预测这些需要调用算法接口的逻辑就需要考虑一下并行化的问题了。我们平均一个训练任务在一天处理的数据量大约在500G左右， ...
分类：
其他好文 时间：
2017-08-12 12:37:33
阅读次数：
144
scikit-learn 是机器学习领域非常热门的一个开源库。基于Python 语言写成。能够免费使用。 网址： http://scikit-learn.org/stable/index.html 上面有非常多的教程，编程实例。并且还做了非常好的总结，以下这张图基本概括了传统机器学习领域的大多数理论 ...
分类：
其他好文 时间：
2017-08-11 10:02:28
阅读次数：
156
卧槽，本来猜GBDT获取的组合特征，需要自己去解析GBDT的树，scikit learn里面竟然直接调用apply函数就可以了 ...
分类：
其他好文 时间：
2017-07-30 17:15:12
阅读次数：
110
运行环境：python3.6+windows64位1.安装pip（1）如果在安装python3.6时，你有勾选关于pip的选项，那么在python3,6中就会带有pip的安装文件安装方法：主要下载地址：http://www.lfd.uci.edu/~gohlke/pythonlibs/按如下步骤进行安装：使用命令提示符（cmd），最好以管理员的身份..
分类：
编程语言 时间：
2017-07-27 13:40:18
阅读次数：
4365
http://scikit-learn.org/stable/modules/model_evaluation.html#scoring-parameter 3.3.1. The scoring parameter: defining model evaluation rules Model sel ...
分类：
其他好文 时间：
2017-07-25 14:20:12
阅读次数：
371
本文參考：http://scikit-learn.org/stable/data_transforms.html 本篇主要讲数据预处理，包含四部分： 数据清洗、数据降维（PCA类）、数据增维（Kernel类）、提取自己定义特征。哇哈哈。还是关注预处理比較靠谱。。。。 重要的不翻译：scikit-le ...
分类：
其他好文 时间：
2017-07-24 10:07:54
阅读次数：
419
http://scikit-learn.org/stable/modules/feature_extraction.html 带病在网吧里。。。。。。写。求支持。。。 1、首先澄清两个概念：特征提取和特征选择（ Feature extraction is very different from Fe ...
分类：
其他好文 时间：
2017-07-20 13:30:52
阅读次数：
235
sklearn.feature_selection模块的作用是feature selection，而不是feature extraction。 Univariate feature selection：单变量的特征选择 单变量特征选择的原理是分别单独的计算每个变量的某个统计指标，根据该指标来判断哪些 ...
分类：
编程语言 时间：
2017-07-19 14:25:04
阅读次数：
156
对于想深入了解线性回归的童鞋，这里给出一个完整的例子，详细学完这个例子，对用scikit-learn来运行线性回归，评估模型不会有什么问题了。 1. 获取数据，定义问题 没有数据，当然没法研究机器学习啦。:) 这里我们用UCI大学公开的机器学习数据来跑线性回归。 数据的介绍在这： http://ar ...
分类：
其他好文 时间：
2017-07-18 15:35:27
阅读次数：
241
