模型评估和选择

时间：2015-05-18 11:02:25 阅读：379 评论：0 收藏：0 [点我收藏+]

分类器评估度量包括准确率（又称“识别率”）、敏感度（或称为召回率recall）、特效性、精度（precision）F1和FΒ。

度量	公式
准确率、识别率	$T P + T N P + N$ $\dfrac{TP+TN}{P+N}$
错误率、识分类率	$F P + F N P + N$ $\dfrac{FP+FN}{P+N}$
敏感度	$T P P$ $\dfrac{TP}{P}$
特效性、真负例率	$T N N$ $\dfrac{TN}{N }$
精度	$T P t p + f p$ $\dfrac{TP}{tp+fp}$
F分数	$2 ? p r e c i s i o n ? r e c a l l p r e c i s i o n + r e c a l l$ $\dfrac{2precisionrecall}{precision+recall}$
FB	$( 1 + B 2 ) ? p r e c i s i o n ? r e c a l l B 2 ? p r e c i s i o n + r e c a l l$ $\dfrac{(1+B^2)precisionrecall}{B^2*precision+recall}$

TP:被分类器正确分类的正元组；
TN：被分类器正确分类的负元组；
FP：被错误的标记为正元组的负元组；
FN：被错误标记为负元组的正元组。

灵敏性

S N = T P P

$SN=\dfrac{TP}{P}$
特异性

S P = T N N

$SP=\dfrac{TN}{N}$
精度和召回率

S P = s e n s i t i v i t y P P + N + s p e c i f i c i t y N P + N

$SP=sensitivity\dfrac{P}{P+N}+specificity\dfrac{N}{P+N}$

初始数据随机划分为k个互不相交的自己，每个自己的大小大致相等。训练和检验进行k次。在第i次迭代，分区Di用做检验集，其余的分区一起用作训练模型，

技术分享

混淆举证可以用来评估分类器的质量。
显著性检验和ROC曲线对于模型选择是有用的。显著性检验可以用来评估两个分类器准确率的差别是否处于偶然。ROC曲线绘制一个或多个分类器的真正例率（或灵敏性）与假正例率（或1-sp）。
组合方法可以通过学习和组合一系列个体基分类模型提高总体的准确率。装袋、提升和随机森林都是流行的组合方法。

原文地址：http://blog.csdn.net/dream_angel_z/article/details/45815041

踩

(0)

评论一句话评论（0）

分享档案

更多>

周排行