机器学习在各个领域都有广泛的应用,特别在数据分析领域有着深远的影响。决策树是机器学习中最基础且应用最广泛的算法模型。本文介绍了机器学习的相关概念、常见的算法分类和决策树模型及应用。通过一个决策树案例,着重从特征选择、剪枝等方面描述决策树的构建,讨论并研究决策树模型评估准则。最后基于
R 语言和 SPSS 这两个工具,分别设计与实现了决策树模型的应用实例。
机器学习概念
...
分类:
编程语言 时间:
2015-08-25 16:51:14
阅读次数:
283
1、DOM的基本概念htmlDOM是一种面向对象的树的模型,它包含html中的所有元素;通过html可以找到所有包含在dom中的元素。DOM是文档对象模型,这种模型为树模型;文档是指标签文档;对象是指文档中每个元素;模型是指抽象化的东西。2、Windows对象操作一、属性和方法:属性(值或者子对象)...
分类:
编程语言 时间:
2015-08-18 15:34:56
阅读次数:
106
谈完数据结构中的树(详情见参照之前博文《数据结构中各种树》),我们来谈一谈机器学习算法中的各种树形算法,包括ID3、C4.5、CART以及基于集成思想的树模型Random Forest和GBDT。本文对各类树形算法的基本思想进行了简单的介绍,重点谈一谈被称为是算法中的“战斗机”,机器学习中的“屠.....
分类:
系统相关 时间:
2015-08-16 18:06:31
阅读次数:
524
由于CSDN以前的编辑器写的博客修改比较麻烦,这篇博客是对以前写的下面这篇博客进行补充
http://blog.csdn.net/zhangzhengyi03539/article/details/44786951
下面这个函数是根据训练好的决策树模型,输入测试样本集合和特征名,对每个测试样本预测输出结果。function label=decisionTreeTest(decisionTreeM...
分类:
编程语言 时间:
2015-08-15 21:30:27
阅读次数:
296
1、DOM的基本概念htmlDOM是一种面向对象的树的模型,它包含html中的所有元素;通过html可以找到所有包含在dom中的元素。DOM是文档对象模型,这种模型为树模型;文档是指标签文档;对象是指文档中每个元素;模型是指抽象化的东西。2、Windows对象操作一、属性和方法:属性(值或者子对象)...
分类:
编程语言 时间:
2015-08-07 01:35:33
阅读次数:
152
1、DOM的基本概念htmlDOM是一种面向对象的树的模型,它包含html中的所有元素;通过html可以找到所有包含在dom中的元素。DOM是文档对象模型,这种模型为树模型;文档是指标签文档;对象是指文档中每个元素;模型是指抽象化的东西。2、Windows对象操作一、属性和方法:属性(值或者子对象)...
分类:
编程语言 时间:
2015-08-06 21:58:07
阅读次数:
240
Titanic是kaggle上的一道just for fun的题,没有奖金,但是数据整洁,拿来练手最好不过。本文以 Titanic 的数据,使用较为简单的决策树,介绍处理数据大致过程、步骤注意,本文的目的,在于帮助你入门数据挖掘,熟悉处理数据步骤、流程决策树模型是一种简单易用的非参数分类器。它不需要对数据有任何的先验假设,计算速度较快,结果容易解释,而且稳健性强,对噪声数据和缺失数据不敏感。下面示范...
分类:
其他好文 时间:
2015-07-28 21:10:29
阅读次数:
163
这一节决策树其实是对前面的堆排序,快排等是最优的比较算法的证明, 首先说下《算法导论》上对决策树的定义:一棵决策树是一棵满二叉树(注意看下面解释),表示某排序算法作用于给定输入所做的所有比较,而控制结构,移动等都被忽略了。 注意:这里个人认为定义是错误的,决策树不是一棵满二叉树,连完全二叉树都不是。...
分类:
其他好文 时间:
2015-07-17 00:10:39
阅读次数:
242
决策树模型呈现树状结构,可以认为是一组if-then规则的集合。在决策树当中,内部接节点是属性或者特征,叶子节点是一个类。一、三个阶段决策树的学习分为了三个方面:特征选择、决策树的生成、决策树的剪枝pruning二、详细解释决策树的学习本质上是从训练集当中总结归纳出一组分类规则。这一组分类规则应该应...
分类:
其他好文 时间:
2015-06-28 14:09:15
阅读次数:
90
决策树(decision tree)是一种基本的分类与回归方法。 决策树模型呈树形结构,在分类问题中,表示基于特征对实例进行分类的过程。 它可以认为是if-then规则的集合,也可以认为是定义在特征空间与类空间上的条件概率分布。其 主要优点是模型具有可读性,分类速度快。学习时,利用训练数据,根据损失...
分类:
其他好文 时间:
2015-06-14 18:17:29
阅读次数:
2162