欢迎关注我的新博客地址：http://cuipengfei.me/blog/2014/10/31/spark-fold-aggregate-why-not-foldleft/
大家都知道Scala标准库的List有一个用来做聚合操作的foldLeft方法。
比如我定义一个公司类：
1
case class Company(name:String, ...
聚合函数在一系列的值上执行特定的运算，并返回单个值，如在给定元素的值上执行求和或计数运算。 LINQ共有7种聚合操作符：Aggregate、Average、Count、LongCount、Max、Min和Sum。1.Aggregate Aggregate操作符从某一特定序列或集合中收集值。当...
分类：
其他好文 时间：
2014-10-22 12:20:37
阅读次数：
199
聚合操作过程中的数据记录和计算结果返回。聚合操作分组值从多个文档，并可以执行各种操作，分组数据返回单个结果。在SQL COUNT（*）和group by 相当于MongoDB的聚集。aggregate() 方法对于在MongoDB中聚集，应该使用aggregate()方法。语法:aggregate(...
分类：
数据库 时间：
2014-10-18 22:06:43
阅读次数：
281
我们来看看下面的几个典型例子：
①查找上一年度各个销售区域排名前10的员工
②按区域查找上一年度订单总额占区域订单总额20%以上的客户
③查找上一年度销售最差的部门所在的区域
④查找上一年度销售最好和最差的产品
我们看看上面的几个例子就可以感觉到这几个查询和我们日常遇到的查询有些不同，具体有：
①需要对同样的数据进行不同级别的聚合操作
...
分类：
其他好文 时间：
2014-09-29 19:38:12
阅读次数：
275
如果需要根据聚合值的结果来过滤分组查询的结果，必须首先执行聚合操作。这里不能使用 WHERE 子句，因为它会在分组和聚合之前对结果进行处理。HAVING 子句用于已在 SELECT 语句中定义的列和聚合表达式。通常，需要在 HAVING 子句中重复聚合函数表达式，来引用聚合值，就如在 SELEC.....
分类：
其他好文 时间：
2014-08-26 07:27:15
阅读次数：
248
今天跟大家分享一下mongodb中比较好玩的知识，主要包括：聚合，游标。一： 聚合 常见的聚合操作跟sql server一样，有：count，distinct，group，mapReduce。 count count是最简单，最容易，也是最常用的聚合工具，它的使用跟我们C#里面的count...
分类：
数据库 时间：
2014-08-06 11:43:21
阅读次数：
257
SQL Terms, Functions, and Concepts MongoDB Aggregation OperatorsWHERE $matchGROUP BY $groupHAVING $matchSELECT ...
分类：
数据库 时间：
2014-07-28 23:54:34
阅读次数：
475
聚合引言
聚集操作就是出来数据记录并返回计算结果的操作。MongoDB提供了丰富的聚集操作，能够检测和执行数据集上的计算。运行在mongod上的数据聚集简化了代码和资源限制。
像查询一样，在Mongo的聚合操作使用collections作为输入，并返回一个或多个document作为输出。
聚合模式
聚合管道
MongoDB2.2引入了一个新的聚合框架：聚合管道，这是基于数据处...
分类：
数据库 时间：
2014-07-24 23:30:33
阅读次数：
431
聚合操作模式（mget，bulk）APIS和单个操作和类似，不同的是，接受请求的node知道操作的document在那个shard上，他根据各个shard拆分总的multi-document请求到单个的multi-document，然后一起分发到各个node。一旦负责请求的node从各个node收到...
分类：
其他好文 时间：
2014-05-19 12:58:40
阅读次数：
330
