宅在家无聊之余决定看着《概率论和数理统计》&《统计学习方法》总结一下朴素贝叶斯和贝叶斯估计。
正好这一块我最近温习了一下,我从一开始条件概率开始写,把我所理解的贝叶斯分类算法完整呈现一下吧。
学的概率论最开始是在高中,当时是条件概率,给出条件概率的定义:事件A在另外一个事件B已经发生条件下的发生概率。条件概率表示为P(A|B),读作“在B条件下A的概率”。
其次...
分类:
其他好文 时间:
2015-02-12 09:25:16
阅读次数:
229
一个文本分类问题就是将一篇文档归入预先定义的几个类别中的一个或几个,而文本的自动分类则是使用计算机程序来实现这样的分类。通俗点说,就好比你拿一篇文章,问计算机这文章要说的究竟是体育,经济还是教育,计...
分类:
其他好文 时间:
2015-02-11 00:38:30
阅读次数:
357
忘记1月19日开课了,少上了两节课,要努力补上了,每周3小时的课程还是可以接受的,开个学习笔记记录下学习心得。00 - 课程与书籍简介1.课程简介统计学习(Statistical Learning)Start:2015.1.19 End:2015.4.5 Estimated Effort:3 h.....
分类:
其他好文 时间:
2015-01-27 12:32:22
阅读次数:
221
HMM隐马尔可夫,隐,说明模型里面含有隐含节点,是我们所无法直接观测到的,这些隐含节点上的状态可以称为隐含状态;马尔科夫,说明模型具有马尔科夫性,一个节点的状态只跟它的邻居有关,与其他节点无关,与时间也无关。我们把节点分为两类,状态节点(隐)和可观察节点(显)。并且假设状态节点为链式结构,每个输出(...
分类:
其他好文 时间:
2015-01-12 10:40:45
阅读次数:
217
最近算是一段空闲期,不想荒废,记得之前有收藏一个机器学习的链接Andrew Ng的网易公开课,其中的overfiting部分做组会报告时涉及到了,这几天有时间决定把这部课程学完,好歹算是有个粗浅的认识。本来想去网上查一查机器学习的书籍,发现李航的《统计学习方法》和PRML(Pattern Recog...
分类:
其他好文 时间:
2015-01-09 17:13:24
阅读次数:
152
参考博客 Liam Q博客 和李航的《统计学习方法》感知机学习旨在求出将训练数据集进行线性划分的分类超平面,为此,导入了基于误分类的损失函数,然后利用梯度下降法对损失函数进行极小化,从而求出感知机模型。感知机模型是神经网络和支持向量机的基础。下面分别从感知机学习的模型、策略和算法三个方面来介绍。1....
分类:
编程语言 时间:
2014-12-25 21:57:06
阅读次数:
252
统计学习是基于数据构建统计模型从而对数据进行预测与分析,统计学习由监督学习,非监督学习,半监督学习和强化学习等组成
统计学习由模型的假设空间(学习的模型属于某个函数的集合),模型选择的准则,及模型学习的算法
分类:
其他好文 时间:
2014-11-29 21:31:23
阅读次数:
173
1. 关于ID3和C4.5的原理介绍这里不赘述,网上到处都是,可以下载讲义c9641_c001.pdf或者参考李航的《统计学习方法》.2. 数据与数据处理本文采用下面的训练数据:数据处理:本文只采用了"Outlook", "Humidity", "Windy"三个属性,然后根据Humidity的值是...
分类:
编程语言 时间:
2014-11-26 14:01:11
阅读次数:
288