标签:
数据集的特性
数据清理:清理不真实或重复的对象(如人的身高2米,体重2kg)
涉及测量误差的问题:
噪声、伪像、偏倚、精度、准确率
涉及数据质量的问题:
离群点、遗漏、不一致的值、重复数据
数据收集错误:遗漏数据对象、不正确包含数据对象,也就是有其他相似但并不应该包含的数据的干扰
离群点:不同于数据集中其他大部分数据的对象
遗漏值:对象遗漏属性(比如有人不愿意透漏姓名、年龄)
聚集:将两个或多个对象合并成单个对象(如表1:学号姓名,表2学号成绩,聚集之后就变成一个表:学号姓名成绩)
抽样:选择数据对象子集进行分析的方法,数据挖掘中采用抽样是为了节省数据处理需要的时间、费用。
有效抽样的原理:样本越具代表性,效果越接近整个数据集
抽样方法:简单随机抽样(有放回、无放回),分层抽样(对于总体由不同类型对象组成,且数量差别很大)
标签:
原文地址:http://www.cnblogs.com/fonxian/p/5060402.html