1.数据质量分析 数据质量分析是数据挖掘中数据准备过程的重要一环，是数据预处理的前提，也是数据挖掘分析结论有效性和准确性的基础，没有可信的数据，数据挖掘构建的模型将是空中楼阁。 数据质量分析的主要任务是检查原始数据中是否存在脏数据，脏数据一般是指不符合要求，以及不能直接进行相应分析的数据。在常见的数 ...
分类：
其他好文 时间：
2019-04-20 21:39:38
阅读次数：
199
一、在地理数据的生产中，地理基础框架数据主要是4D产品： 二、根据空间数据的内容和用途，分为基础数据和专题数据： 三、空间数据质量通过准确度、精度、不确定性、相容性、一致性、完整性、可得性、现势性等指标度量。 四、GIS 数据流程 ...
分类：
其他好文 时间：
2019-04-10 13:51:55
阅读次数：
132
对象关系映射：是一种为了解决面向对象与关系数据库存在的互不匹配的现象的规范。 简单的说，ORM是通过使用描述对象和数据库之间映射的元数据，将java程序中的对象自动持久化到关系数据库中。 避免直接使用SQL语句对关系型数据库中的数据进行操作. 减少代码编写量,提高产品质量。 ORM 主要解决对象-关 ...
分类：
其他好文 时间：
2019-04-08 21:16:17
阅读次数：
210
3.1 数据预处理 数据质量的三个要素：准确性、完整性和一致性。 3.1.2 数据预处理的主要任务 数据清理：填写缺失的值，光滑噪声数据，识别或删除离群点，并解决不一致性来”清理“数据。 数据集成：相关性分析，卡方，协方差，相关系数 数据归约:大->小，维归约，数据压小 数据变换和数据离散化:规范化 ...
分类：
其他好文 时间：
2019-04-06 22:47:56
阅读次数：
253
单行注释 多行注释 算术运算符 变量定义 变量名 = 值 例：超市买苹果 变量类型(python定义数据时不需要指定类型) 不同类型数据的计算 字符串拼接 变量的输入 例：超市买苹果Plus 格式化输出 ...
分类：
编程语言 时间：
2019-04-03 16:39:29
阅读次数：
163
数据清洗一是为了解决数据质量问题，二是让数据更加适合做挖掘 一、解决数据质量问题 数据的完整性，比如人的属性中缺少性别、籍贯、年龄等 数据的唯一性，比如不同来源的数据出现重复的情况 数据的权威性，比如同一个指标出现多个来源的数据，且数值不一样 数据的合法性，比如数据与常识不符，市区内开车速度到达了4 ...
分类：
其他好文 时间：
2019-03-24 09:20:44
阅读次数：
123
数据挖掘的基本流程 1 商业理解：数据挖掘不是我们的目的，我们的目的是更好的帮助业务，所以第一步我们要从商业的角度理解项目需求，在这个基础上，在对数据挖掘目标进行定义 2 数据理解：尝试收集部分数据，然后对数据进行探索，包括数据描述，数据质量验证等，有助于对收集的数据有个初步认知 3 数据准备： 开 ...
分类：
其他好文 时间：
2019-03-18 13:42:04
阅读次数：
163
现如今，在大数据的浪潮中，很多人都开始学习数据分析的知识，因为数据分析这一行业的前景是十分明朗的，而这个数据分析也是需要学习很多知识的，我们在这篇文章中就给大家介绍一下关于数据分析师工作中需要学会的五种技能，希望这篇文章能够帮助到大家。 ...
分类：
其他好文 时间：
2019-03-12 18:41:32
阅读次数：
166
原文：点击这里 数据仓库元数据管理 一、元数据的定义 元数据（metadata） 即数据的数据，是描述数据仓库结构和数据仓库建立方法的数据，主要记录数据仓库中模型的定义、各层级间的映射关系、监控数据仓库的数据状态及ETL的任务运行状态。一般会通过元数据资料库（Metadata Repository） ...
分类：
其他好文 时间：
2019-03-11 13:38:01
阅读次数：
205
淘宝IP地址库 提供的服务包括：1. 根据用户提供的IP地址，快速查询出该IP地址所在的地理信息和地理相关的信息，包括国家、省、市和运营商。2. 用户可以根据自己所在的位置和使用的IP地址更新我们的服务内容。 优势： 1. 提供国家、省、市、县、运营商全方位信息，信息维度广，格式规范。2. 提供完善 ...
