如果要将一个string list转换成int list (list里每个string都转成int),比如 [python] ['0','1','2'] -> [0,1,2] 可以使用: [python] [int(x) for x in list] 或者使用map操作: map(func, lis ...
分类:
其他好文 时间:
2016-05-30 23:14:38
阅读次数:
154
在 RxJava- 操作符之过滤Observables
了解到,RxJava过滤操作符的基本使用,主要是针对Observable列表。本篇主要针对Observable列表中对象操作符的使用。用于变换可观测序列来创建一个能够更好的满足我们需求的序列。
map
map操作符通过指定一个的Func对象,将Observables转换为一个新的Observable对象并发射,观察者将收...
分类:
编程语言 时间:
2016-05-18 19:38:49
阅读次数:
228
Map遍历操作以及插入操作。 要点:insert插入要用pair, 遍历的时候it->first的first后面没有first() ...
分类:
编程语言 时间:
2016-05-11 01:09:21
阅读次数:
136
STL实践与分析
--set类型
引:
map容器是键-值对的集合,好比人名为键的地址和电话号码。相反的,set容器类型只是单纯的键的集合。当只想知道一个键是否存在时,使用set容器是最合适的。
除了两种例外情况,set容器支持大部分的map操作,包括下面几种:
1)第10.2节列出的所有通用的容器操作。
2)表10.3描述的...
分类:
编程语言 时间:
2016-05-07 11:10:40
阅读次数:
239
举个例子:
val factor = 3
rdd.map( num => num*factor)以上两行代码显示了rdd的一个map操作,其中factor是一个外部变量。默认情况下,算子的函数内,如果使用到了外部变量,那么会将这个变量拷贝到执行这个函数的每一个task中。如果该变量非常大的话,那么网络传输耗费的资源会特别大,而且在每个节点上占用的内存空间也特别大。
Spark提供的Broadc...
分类:
其他好文 时间:
2016-05-07 09:08:54
阅读次数:
144
1.图解MapReduceMapReduce整体流程图 并行读取文本中的内容,然后进行MapReduce操作 Map过程:并行读取三行,对读取的单词进行map操作,每个词都以<key,value>形式生成 reduce操作是对map的结果进行排序,合并,最后得出词频。 2.简单过程: Input: ...
分类:
其他好文 时间:
2016-04-15 19:58:48
阅读次数:
139
http://blog.csdn.net/liu826710/article/details/9001254 Map<String, Object> oldMap = beanToMap(object); Map<String, Object> map = new HashMap<String, O ...
分类:
其他好文 时间:
2016-04-13 18:35:03
阅读次数:
163
文本挖掘是一个对具有丰富语义的文本进行分析,从而理解其所包含的内容和意义的过程。文本挖掘包含分词、文本表示、文本特征选择、文本分类、文本聚类、文档自动摘要等方面的内容。文本挖掘的具体流程图可下图所示:
我的项目是以复旦大学中文语料库和路透社英文语料库为数据集的,都是有类别的两层目录文本集。
不管你要做什么,你首先都要先读取文本,为了方便后面的操作,我写了几个工具类,这里先将文本读取Reade...
分类:
其他好文 时间:
2016-03-29 10:52:32
阅读次数:
291
第三章 泛型编程风格Standard Template Library(STL)两种组件构成: 容器(container)(vector、list、set、map...) 操作以上容器的所谓的泛型算法(generic algorithm)(find(), sort(), replace(), mer...
分类:
其他好文 时间:
2016-01-20 06:15:59
阅读次数:
258
map将RDD中的每个数据项,一对一的映射关系,RDD数目不变,分区数也不变例子:数据集:map操作:flatMap和map一样,但是会拆分每一个map之后的list,可以理解为一对多(注:会把字符串当作数组然后拆分)例子:distinct对RDD的数据项进行去重操作例子:coalescedef c...
分类:
其他好文 时间:
2016-01-02 14:13:08
阅读次数:
200