一.Hive应用场景本文主要讲述使用 Hive 的实践，业务不是关键，简要介绍业务场景，本次的任务是对搜索日志数据进行统计分析。集团搜索刚上线不久，日志量并不大 。这些日志分布在 5 台前端机，按小时保存，并以小时为周期定时将上一小时产生的数据同步到日志分析机，统计数据要求按小时更新。这些统计项， ...
分类：
其他好文 时间：
2016-08-23 23:23:38
阅读次数：
184
R 是一门拥有统计分析及作图功能的免费软件，主要用于数学建模、统计计算、数据处理、可视化等方向。据 IEEE Spectrum发布的2016年编程语言前10位排名来看，R语言由2015年排名第6位上升级2016年的第5位。目前在CRAN 上发布的算法包已经超过8000+多个。R体系涉及到高等数据、概 ...
分类：
其他好文 时间：
2016-08-14 11:42:22
阅读次数：
625
数据分析是指用适当的统计分析方法对收集来的大量数据进行分析，将它们加以汇总、理解并分析，以求最大化地开发数据的功能，发挥数据的作用。数据分析是为了提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。这里数据也称观测值，是通过实验、测量、观察、调查等方式获取的结果，常常以数量的形式展现出来。 ...
分类：
其他好文 时间：
2016-08-12 16:43:32
阅读次数：
155
一、读写CSV数据： 二、数据汇总和统计:pandas（大型数据集分析、数据归组、统计分析等） ...
分类：
编程语言 时间：
2016-08-11 22:27:15
阅读次数：
248
场景5 Performance Management 性能调优（不能重启数据库） 索引 资源管理器 性能优化 统计分析 SQL性能分析 SPM (SQL执行计划管理) 堆表 ：数据存储无序 位图索引 ：适合字段重复值高的，数据仓库环境下（适合OLAP/DSS环境），存储占用空间少, DML成本高, ...
分类：
其他好文 时间：
2016-08-10 09:56:38
阅读次数：
211
为了避免不必要的麻烦。 一些数据讲的不太清楚， 关键看爆点的思路。 通过大数据统计分析， 我发现可以用一个线性公式完美的拟合一个用户转化环节。并依据此公式对近期没有发生的数据做出预测。 这就是大数据的魅力所在吧。 依据以上发现， 我觉得至少我们这个产品，套用互联网的漏斗模型，在每两个环节之间的转化模 ...
分类：
其他好文 时间：
2016-08-08 14:19:22
阅读次数：
128
office软件是微软公司出的办公套装软件，其中就有excel，它可以进行各种数据的处理、统计分析和辅助决策操作，广泛地应用于管理、统计财经、金融等众多领域。在使用过程中常常需要对其进行修改，常常会出现文件差异的问题。这个时候就可以通过文件对比工具Beyond Compare来解决。下面就来给大家分... ...
分类：
其他好文 时间：
2016-08-08 11:00:40
阅读次数：
234
Excel 是微软办公套装软件的一个重要的组成部分，它可以进行各种数据的处理、统计分析和辅助决策操作，广泛地应用于管理、统计财经、金融等众多领域。 Excel删除公式保留数据 1.简单举例一个简单的公式数据，第三列对第一列的操作，当然，我们日常会有更多的复制的公式，但是原理是一样的，如图。 2.我们 ...
分类：
其他好文 时间：
2016-08-04 01:19:33
阅读次数：
137
1. 机器学习更多应用举例： 人脸识别 2. 机器学习就业需求： LinkedIn所有职业技能需求量第一：机器学习，数据挖掘和统计分析人才 http://blog.linkedin.com/2014/12/17/the-25-hottest-skills-that-got-people-hired- ...
分类：
编程语言 时间：
2016-08-03 15:06:44
阅读次数：
328
项目 一、项目需求：对搜索关键词进行类别的统计分析，为了后面的entity-rank做准备。 0，各种关键数据统计： 数据量：1个月数据：about 1000T。 1，对IE的所有浏览搜索的提取代码： Scope： //Script GUID:ad2766d3-7aec-4ffa-9bbd-ec27 ...
分类：
其他好文 时间：
2016-08-02 17:04:38
阅读次数：
143
