一、词频统计: 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words flatmap() 3.全部转换为小写 lower() 4.去掉长度小于3的单词 filter() 5.去掉停用词 6.转换成键值对 map() 7.统计词频 reduceByKey() 二、学生课程分 ...
分类:
其他好文 时间:
2021-04-06 15:15:03
阅读次数:
0
一、filter,map,flatmap练习: 1.读文本文件生成RDD lines lines = sc.textFile('file:///home/hadoop/word.txt') lines.collect() 2.将一行一行的文本分割成单词 words words=lines.flatM ...
分类:
其他好文 时间:
2021-04-01 13:07:18
阅读次数:
0
这周开始使用activiti工作流。任务要求:做一个二级审批流程(可驳回) 遇到的一些问题: IDEA集成activiti,2019版本的IDEA插件商店和别的版本不同。 bpmn会出现乱码问题,需要更改IDEA的相关配置文件 activiti操作数据库会出现乱码问题,需要在activiti.cfg ...
分类:
其他好文 时间:
2021-04-01 12:56:51
阅读次数:
0
1. 准备文本文件从文件创建RDD lines=sc.textFile()筛选出含某个单词的行 lines.filter()lambda 参数:条件表达式 2. 生成单词的列表从列表创建RDD words=sc.parallelize()筛选出长度大于2 的单词 words.filter() ...
分类:
其他好文 时间:
2021-03-30 12:53:37
阅读次数:
0
1.准备文本文件,从文件创建RDD lines=sc.textFile(),筛选出含某个单词的行 lines.filter(),lambda 参数:条件表达式 2.生成单词的列表,从列表创建RDD words=sc.parallelize(),筛选出长度大于2 的单词 words.filter() ...
分类:
其他好文 时间:
2021-03-29 12:30:29
阅读次数:
0
思路:双指针从后往前遍历,根据第一个遇到的空格划分单词,使用StringBuilder拼接。 贴一下从后往前最后一个单词怎么拼接: 1.如果首位为字母,while(i >= 0 && s.charAt(i) != ' '),i为-1时进行拼接然后跳出大循环。 2.如果首位为空格,也类似,只是不用拼接 ...
分类:
其他好文 时间:
2021-03-29 12:24:40
阅读次数:
0
1. 准备文本文件从文件创建RDD lines=sc.textFile()筛选出含某个单词的行 lines.filter()lambda 参数:条件表达式 2. 生成单词的列表从列表创建RDD words=sc.parallelize()筛选出长度大于2 的单词 words.filter() ...
分类:
其他好文 时间:
2021-03-29 12:04:28
阅读次数:
0
#include<stdio.h> int main() { int x, y; int r1, r2, r3, r4; x = 1; y = 2; r1 = x + y; r2 = x - y; r3 = x * y; r4 = x / y; printf("r1 = %d\n", r1); pr ...
分类:
其他好文 时间:
2021-03-15 11:09:08
阅读次数:
0
#摘要 我们提出了YOLO的一些更新!我们做了一些小的设计更改,以使其更好。我们还训练了这个相当庞大的新网络。比上次要大一点,但更准确。不过请放心,速度还是很快的。在320×320的像素下,YOLOv3的运行速度为22 ms,精度为28.2 mAP,与SSD一样精确,但速度快了三倍。当我们看一下旧的 ...
分类:
其他好文 时间:
2021-03-15 10:50:08
阅读次数:
0
Error: Error launching source instance: Unsupported: The requested configuration is currently not supported. Please check the documentation for suppor ...
分类:
其他好文 时间:
2021-03-15 10:42:10
阅读次数:
0