统计tomcat的access日志的ip次数，并按次数排序 awk '{sum[$1]++}END{for(i in sum) print i "\t" sum[i]}' localhost_access_log.* | sort -n -k2 统计某个接口的调用时间 awk '{if($7~/.* ...
分类：
数据库 时间：
2021-04-21 12:18:10
阅读次数：
0
读文本文件生成RDD lines 将一行一行的文本分割成单词 words flatmap() 全部转换为小写 lower() 去掉长度小于3的单词 filter() 去掉停用词 转换成键值对 map() 统计词频 reduceByKey() 按字母顺序排序 sortBy(f) 按词频排序 sortB ...
分类：
其他好文 时间：
2021-04-21 12:03:05
阅读次数：
0
mysql 系统提供了很多的函数 count:统计个数,次数,null不统计 max:最大值 min:最小值 sum求和 avg平均值 round：四舍五入 ...
分类：
其他好文 时间：
2021-04-20 15:47:17
阅读次数：
0
一、词频统计： 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words flatmap() 3.全部转换为小写 lower() 4.去掉长度小于3的单词 filter() 5.去掉停用词 6.转换成键值对 map() 7.统计词频 reduceByKey() 8.按字母顺序 ...
分类：
其他好文 时间：
2021-04-20 15:35:56
阅读次数：
0
一、词频统计： 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words flatmap() 3.全部转换为小写 lower() 4.去掉长度小于3的单词 filter() 5.去掉停用词 6.转换成键值对 map() 7.统计词频 reduceByKey() 8.按字母顺序 ...
分类：
其他好文 时间：
2021-04-20 15:35:16
阅读次数：
0
1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words flatmap() 3.全部转换为小写 lower() 4.去掉长度小于3的单词 filter() 5.去掉停用词 6.转换成键值对 map() 7.统计词频 reduceByKey() 8.按字母顺序排序 sortB ...
分类：
其他好文 时间：
2021-04-20 15:17:39
阅读次数：
0
一、词频统计： 1.读文本文件生成RDD lines lines = sc.textFile('file:///home/hadoop/word.txt') 2.将一行一行的文本分割成单词 words flatmap() words=lines.flatMap(lambda line:line.sp ...
分类：
其他好文 时间：
2021-04-20 15:02:06
阅读次数：
0
http://blog.sina.com.cn/s/blog_af22ea410102uy2h.html 首先橡胶其实也属于农产品，天然橡胶来自橡胶树的割胶，我们认为橡胶一般是6年一周期，这个品种它涨涨6年，跌跌6年，为什么能做出这个判断呢？资本的本性，钱的本性，它就是逐利的，什么地方能赚钱，钱就会 ...
分类：
其他好文 时间：
2021-04-20 14:37:01
阅读次数：
0
一、词频统计： 读文本文件生成RDD lines lines=sc.textFile("file:///usr/local/spark/mycode/rdd/word.txt") lines.foreach(print) 将一行一行的文本分割成单词 words flatmap() words=lin ...
分类：
其他好文 时间：
2021-04-20 14:04:55
阅读次数：
0
6.成绩统计（15） 对给定人数的成绩输出其及格率和优秀率（百分号前保留整数） n = int(input()) a,b=0,0 for i in range (n): s = int(input()) if s>=60: a+=1 if s>=85: b+=1 print('{:.0%}'.for ...
分类：
其他好文 时间：
2021-04-19 15:57:59
阅读次数：
0
