处理过拟合的方法：1、去噪（数据清洗）；2、增加训练数据集（收集或构造新数据）3、正则化（L1、L2）4、减少特征数目5、对于决策树可以采用剪枝法6、采用组合分类器（装袋或随机森林）7、选择合适的迭代停止条件8、迭代过程中进行权值衰减（以某个小因子降低每个权值）
分类：
其他好文 时间：
2015-07-11 22:41:55
阅读次数：
478
一个融资客的强平日记2015-07-10腾讯财经98评摘要本文转自天涯BBS，作者署名u_103639903。在小盘股大涨前夜，他因一倍杠杆长期投资被强制平仓，清洗出局。细读此文，体会大时代下小人物的悲剧，或许可令大人物们深思。我使用正常的券商融资融券业务，1配1，850万本金配有850万融资额度，...
分类：
其他好文 时间：
2015-07-10 14:59:21
阅读次数：
727
最近涌现出各种各样能帮助你理解日志的新工具，有类似 Scribe、Logstash 这样的开源项目，也有类似 Splunk 的预付费工具，还有托管服务如 SumoLogic 和 PaperTrail。这些工具的共同点是对日志数据进行清洗，在大量日志中提取一些更有价值的文件。但有一件事这些工具却爱莫能...
分类：
其他好文 时间：
2015-07-09 19:32:42
阅读次数：
154
最近涌现出各种各样能帮助你理解日志的新工具，有类似 Scribe、Logstash 这样的开源项目，也有类似 Splunk 的预付费工具，还有托管服务如 SumoLogic 和 PaperTrail。这些工具的共同点是对日志数据进行清洗，在大量...
分类：
其他好文 时间：
2015-07-09 06:23:34
阅读次数：
122
关联分析、噪声、高维性数据挖掘不是信息检索数据库中知识发现KDD：输入数据->数据预处理(特征选择、维归约、规范化、选择数据子集)->数据挖掘->后处理(模式过滤、可视化、模式表示)->信息数据预处理阶段，涉及融合多个数据源的数据、清洗数据、去噪和重复的观测值..
分类：
其他好文 时间：
2015-07-07 13:16:33
阅读次数：
239
首先，找出符合条件的文章。1.清洗公式格式为\\begin{equation}...\\end{equation}\\begin{eqnarray}...\\end{eqnarray}2.以每段为准，将句子连接，接着进行分句（每行为一个句子）。3.清洗标签格式为(\\$$.*?\\$$)?(\\$....
分类：
编程语言 时间：
2015-07-04 12:32:24
阅读次数：
202
机器学习中的数据清洗与特征处理综述随着美团交易规模的逐步增大，积累下来的业务数据和交易数据越来越多，这些数据是美团做为一个团购平台最宝贵的财富。通过对这些数据的分析和挖掘，不仅能给美团业务发展方向提供决策支持，也为业务的迭代指明了方向。目前在美团的团购系统中大量地应用到了机器学习和数据挖掘技术，例如...
分类：
其他好文 时间：
2015-07-01 20:39:26
阅读次数：
115
有氧运动——护鼻子
女性经期时应远离污染较重的地方，或过冷过热的环境每周至少3次1个小时以上的有氧运动,振动防闭塞装置，也可以人喷洒药物雾剂清洗。
适当减肥——护心脏
适量减肥，少吃蛋黄一周最多只能吃两个，适度饮酒，每周喝一罐355毫升的啤酒或一杯250毫升的葡萄酒。
..
分类：
其他好文 时间：
2015-06-19 13:47:39
阅读次数：
115
在敷面膜之前必须把脸部清洁干净，让脸部的那些脏东西清洗出来。⑵干性皮肤或气候干燥时，可以先拍柔肤水，清洁面膜用后需要清洗，应敷在爽肤水、柔肤水前面，滋润面膜则应用在爽肤水、柔肤水后，棉布型面膜用在爽肤后、润肤前，用后通常无须清洗。⑶以手指将面膜均匀涂于脸部和颈部，但要注意面膜必须距离眼睛和口周0.5...
分类：
其他好文 时间：
2015-06-16 12:48:11
阅读次数：
101
原创作品，出自 “深蓝的blog” 博客，欢迎转载，转载时请务必注明出处，否则有权追究版权法律责任。
深蓝的blog：
【背景】
在进行数据抽取时，源端“时间意义”字段数据为“时间戳格式”，而且字段类型为字符串类型。但是目标端要求，进入数据为date类型，需要清洗。
【解决】
遇到这种问题，起初可能会比较棘手，但通过对“时间戳格式”进行简单分析后，...
分类：
其他好文 时间：
2015-06-16 09:16:32
阅读次数：
204
