1）高阶函数变量可以指向函数abs----变量名，函数的地址2）函数名也是变量3）可以传入函数4）map/reduce/filter/sortedmap函数接收两个变量，一个是函数，一个是序列，map将传入的函数一次作用于序列的每一个元素，将新的结果作为序列返回#-*-coding:utf-8-*-
deff(x):
returnx..
分类：
编程语言 时间：
2015-12-21 16:25:16
阅读次数：
150
原文：http://xiaoxia.org/2011/12/18/map-reduce-program-of-rmm-word-count-on-hadoop/在Hadoop上运行基于RMM中文分词算法的MapReduce程序23条回复我知道这个文章标题很“学术”化，很俗，让人看起来是一篇很牛B或者...
分类：
编程语言 时间：
2015-12-19 23:04:58
阅读次数：
426
Python内建了map()reduce()filter()函数。我们先看map。map()函数接收两个参数，一个是函数，一个是序列，map将传入的函数依次作用到序列的每个元素，并把结果作为新的list返回。map即通过函数对列表进行处理得到新的列表。>>>defcube(x):...returnx*x...>>>..
分类：
其他好文 时间：
2015-12-11 18:59:22
阅读次数：
141
Spark核心概念简介一个Spark应用都由驱动器程序发起集群上的各种并发操作，一个驱动器程序一般包含多个执行器节点，驱动器程序通过一个SaprkContext对象访问saprk。RDD(弹性分布式数据集)----分布式的元素集合，RDD支持两种操作：转化操作、行动操作，如map、reduce函数。
分类：
其他好文 时间：
2015-12-05 17:57:49
阅读次数：
158
1、新建MR工程依次点击 File → New → Ohter…选择 “Map/Reduce Project”，然后输入项目名称:mrdemo，创建新项目:2、（这步在以后的开发中可能会用到，但是现在不用，现在直接新建一个class文件即可）创建Mapper和Reducer依次点击 File → N...
分类：
其他好文 时间：
2015-12-05 11:05:37
阅读次数：
156
共享变量通常情况下，当向Spark操作(如map,reduce)传递一个函数时，它会在一个远程集群节点上执行，它会使用函数中所有变量的副本。这些变量被复制到所有的机器上，远程机器上并没有被更新的变量会向驱动程序回传。在任务之间使用通用的，支持读写的共享变量是低效的。尽管如此，Spark提供了两种有限...
分类：
其他好文 时间：
2015-12-03 14:11:33
阅读次数：
177
Lodash用来操作对象和集合，比Underscore拥有更多的功能和更好的性能。官网：https://lodash.com/引用：安装：npm install lodash首先通过npm安装lodash:npm i --save lodash在js文件中引用lodash:var _ = requi...
分类：
其他好文 时间：
2015-12-01 22:59:19
阅读次数：
237
map/reduce#函数式编程的一个特点就是，允许把函数本身作为参数传入另一个函数，还允许返回一个函数#编写高阶函数，就是让函数的参数能够接收别的函数def add(x, y, f): return f(x) + f(y)print(add(-1, 1, abs))def f(x): ...
分类：
其他好文 时间：
2015-11-27 12:50:55
阅读次数：
157
有不少文章介绍python的map与reduce，这到底是什么样的东西呢？先看看google的paper里对mapreduce的解释http://static.googleusercontent.com/media/research.google.com/zh-CN//archive/mapreduce-osdi04.pdfMapReduceisaprogrammingmodelandanassociated
implementationforpr..
分类：
编程语言 时间：
2015-11-19 16:55:07
阅读次数：
184
Python内置了一些非常有趣但非常有用的函数，充分体现了Python的语言魅力！filter(function, sequence)：对sequence中的item依次执行function(item)，将执行结果为True的item组成一个List/String/Tuple（取决于sequence...
分类：
编程语言 时间：
2015-11-16 13:59:11
阅读次数：
124
