在github上有spark-java8 实例地址: https://github.com/ypriverol/spark-java8 https://github.com/ihr/java8-spark 学些java8 Lambda Expressions 的可以参考下,同时自己也做下比较。 ja ...
分类:
其他好文 时间:
2017-12-25 15:06:50
阅读次数:
173
scala 基本语法 1.声明变量 (1)val i = 1 使用val声明的变量值是不可变的,相当于java里final修饰的变量,推荐使用。(2)var i = "hello" 使用var声明的变量值是可变的(3)val s = "hi" scala编译器会自动推断变量的类型,必要的时候可以指定 ...
分类:
其他好文 时间:
2017-10-29 15:15:44
阅读次数:
223
在杨老师的勉励下,我准备开始“自己”写程序。速度很慢,不过在写的过程中对于用到的几个函数更加熟悉。也尝试多学一点,学透一点。遇到不会的函数,语法不清楚的,还是会百度,不过会自己再敲一遍。重复下去。 下面记录一下。 根据老师的SPEC要求,加上后来测试和学长们互怼、和Ranh讨论。我构思自己的单词统计 ...
分类:
其他好文 时间:
2017-09-26 00:01:48
阅读次数:
131
1 /* 2 * 没能实现的功能:wc.exe -s递归处理目录下符合条件的文件 3 * wc.exe -x 显示图形界面 4 * 5 * 6 * 实现的功能: wc.exe -c显示文件的字符数、 7 * wc.exe -l行数、 8 * wc.exe -... ...
分类:
编程语言 时间:
2017-09-20 14:42:17
阅读次数:
779
##需求分析:* 1:英文词频分析需要的就是在用户输入一串 单词、或者读取一个英文档次的文件夹,分 析里面单词出现的频率,并加以统计。* 2:可以根据用户输入的单词统计该单词的出 现频率。* 3:延伸功能设想,可以使用可视化图表的方 法用百分比的方式更加直观的显示出来。 ...
分类:
其他好文 时间:
2017-09-09 09:38:21
阅读次数:
159
0.前言前面一篇《Hadoop初体验:快速搭建Hadoop伪分布式环境》搭建了一个Hadoop的环境,现在就使用Hadoop自带的wordcount程序来做单词统计的案例。1.使用示例程序实现单词统计(1)wordcount程序wordcount程序在hadoop的share目录下,如下:[root@leafmapreduce]#pwd
/usr/loca..
分类:
其他好文 时间:
2017-09-03 23:54:37
阅读次数:
229
WordCountTopology数据流分析(storm编程模型) 上一章的example的单词统计在storm的数据流动到底是怎么进行的呢,这一章节开始介绍; ...
分类:
其他好文 时间:
2017-07-21 01:17:44
阅读次数:
177
1、创建Maven项目 创建的过程参考:http://blog.csdn.net/tototuzuoquan/article/details/74571374 2、启动Kafka A:安装kafka集群:http://blog.csdn.net/tototuzuoquan/article/detai ...
分类:
Web程序 时间:
2017-07-18 00:00:14
阅读次数:
370
字典是用来查阅某一个字或词的,所谓字典树也就是用于查找某一个数字序列或字符串的。字典树又称Trie树,是一种用树状结构存储字符串的数据结构,经典题目有最长公共前缀、单词统计等。 字典树的存储 字典树的存储原理可见下图。树的根节点什么都不存,接下来每一层的一个节点存储一个字母(或数字),直到将所有的字 ...
分类:
其他好文 时间:
2017-06-27 23:27:42
阅读次数:
192
计算出文件中每个单词的频数。要求输出结果按照单词的字母顺序进行排序。每个单词和其频数占一行,单词和频数之间有间隔。 比如,输入两个文件,其一内容如下...... ...
分类:
系统相关 时间:
2017-05-20 09:57:07
阅读次数:
319