电脑缓存目录: 1.取消文件隐藏 2.找到C:\Users\lwx351192\AppData\Local\Temp目录下的三个子文件夹local，locallow,roaming里面的文件都可删除, temp文件夹下，存放了一些解压文件，安装软件时就从这里调取数据特别是一些制图软件，体积非常大，占 ...
分类：
其他好文 时间：
2017-04-04 11:39:36
阅读次数：
167
Vbs清理备份数据-保留数据量我们前面文章介绍了，通过vbs脚本对文件进行压缩备份，但是通过计划任务备份的话，备份的数据会越来越多，对于我们的磁盘空间利用来说比较浪费，所以我们又通过以下脚本进行判断，将多余的备份数据清理，我们需要将D盘下的backup目录下的备份数据只..
分类：
其他好文 时间：
2017-03-18 21:44:17
阅读次数：
191
由于项目原因，最近经常碰到Kafka消息队列拥堵的情况。碰到这种情况为了不影响在线系统的正常使用，需要大家手动的清理Kafka Log。但是清理Kafka Log又不能单纯的去删除中间环节产生的日志，中间关联的很多东西需要手动同时去清理，否则可能会导致删除后客户端无法消费的情况。 在介绍手动删除操作 ...
分类：
其他好文 时间：
2016-12-20 23:27:54
阅读次数：
938
1.csv作为数据中介,速度最快,但是如果某个字段的内容有逗号,整个都乱套了, 还是用excel2007格式比较好. 2.导入表的字段,最好设为nvarchar,可以为空.类型转换以后再说 3.数据清洗,比如客户数据,性别,地址. 第二步：格式内容清洗 如果数据是由系统日志而来，那么通常在格式和内容 ...
分类：
其他好文 时间：
2016-12-09 19:23:29
阅读次数：
276
事件缘由：
使用sys账户创建了一个数据清理的存储过程，再创建一个Oracle job定时运行这个存储过程，用于做表数据的清理。第二天看表数据未删除，说明job执行有错，打算使用sys账号登录查看j...
分类：
其他好文 时间：
2016-11-18 18:55:17
阅读次数：
155
信用评分卡模型入门 2016-07-26 智能算法 智能算法 一、背景介绍： 4.数据整理（数据清理过程） 大量取样的数据要真正最后进入模型，必须经过数据整理。在数据处理时应注意检查数据的逻辑性、区分“数据缺失”和“0”、根据逻辑推断某些值、寻找反常数据、评估是否真实。可以通过求最小值、最大值和平均 ...
分类：
编程语言 时间：
2016-11-11 07:50:24
阅读次数：
996
这两天一直在琢磨自动化测试，自动化测试，其实与单元测试有一些相同之处，单元测试的目的也是可以一次写，多次运行，对于测试驱动及后期维护真是有非常多的好处，用自动化测试工具也是如何，主要目的是为了回归测试。单元测试的时候，我们要先准备数据，再测试，最后再进行数据清理，自动化测试也是如此，大家千万别觉得自 ...
数据预处理 1. 数据质量的三个要素：准确性、完整性、一致性 2. 数据预处理的主要任务： 数据清理、数据集成、数据归约、数据变换 一. 数据清理 数据清理主要：填补缺失的值，光滑噪声同时识别离群点，并纠正数据的不一致性。 通常是一个两步的迭代过程，包括偏差检测和数据变换 注意：在某些情况下，缺失值 ...
分类：
其他好文 时间：
2016-10-13 14:01:57
阅读次数：
151
脏检查 脏检查是在提交事务的时候会进行脏检查,脏检查会对比快照和原始数据，如果发现数据不匹配就会将session中的数据清理 (在这里补充一下快照和原始数据，快照和原始数据是匹配的数据，在set数据时,会保存两份数据，一份是快照，一份是原始数据) 清理缓存是将session当中不同步的快照数据把他更 ...
分类：
其他好文 时间：
2016-08-29 11:31:14
阅读次数：
299
一.现在我主要讲解数据挖掘的基本规范流程 数据挖掘通常需要数据收集，数据集成，数据规约，数据清理，数据变换，数据挖掘实施过程，模式评估和知识表示 1.数据收集：根据所得的数据，抽象出数据的特征信息，将收集到的信息存入数据库。选择一种合适的数据存储和管理的数据仓库类型 2.数据集成：把不同来源，格式的 ...
分类：
其他好文 时间：
2016-08-27 23:27:05
阅读次数：
174
