08 学生课程分数的Spark SQL分析 一. 读学生课程分数文件chapter4-data01.txt,创建DataFrame。 1.生成“表头” 2.生成“表中的记录” 3.把“表头”和“表中的记录”拼装在一起 用DataFrame的操作或SQL语句完成以下数据分析要求,并和用RDD操作的实现 ...
分类:
数据库 时间:
2021-05-24 17:01:32
阅读次数:
0
1.用DataFrame的操作或SQL语句完成以下数据分析要求: 2.总共有多少学生? 3.开设了多少门课程? 4.每个学生选修了多少门课? 5.每门课程有多少个学生选? 6.Tom选修了几门课?每门课多少分? 7.Tom的成绩按分数大小排序。 8.Tom的平均分。 9.每个分数+5分。 10.求每 ...
分类:
数据库 时间:
2021-05-24 16:49:50
阅读次数:
0
一、数组(list) 7.1数组的知识 上面案例的问题 重复 类代的代码很多 如果有10个学生、一百个学生。。。 数学中的数组(数列) X = A1+A2+A3 程序中也有数组 A[1] 7.2变量的本质 变量的本质,就是一个储存空间,是一个地址 一个宿舍 数组的本质,一段连续的内存空间 一层宿舍, ...
分类:
编程语言 时间:
2021-05-24 04:42:22
阅读次数:
0
我们可以借助python的第三方库openpyxl来实现 安装openpyxl: pip3 install openpyxl 演示:创建一个学生信息表(stuInfo.xlsx) from openpyxl import Workbook wb = Workbook() #创建工作簿 ws = wb ...
分类:
编程语言 时间:
2021-05-24 03:56:29
阅读次数:
0
结果集映射 resultMap 复杂类型使用(一对多的处理) - association 关联 [多对一] 多个学生对应一个老师 - connection 集合 [一对多] 一个老师对应多个学生 - javaType 和 ofType javaType 用来指定实体类中的某个属性的类型 ofType ...
分类:
其他好文 时间:
2021-05-24 01:42:09
阅读次数:
0
一、词频统计: 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words flatmap() 3.全部转换为小写 lower() 4.去掉长度小于3的单词 filter() 5.去掉停用词 6.转换成键值对 map() 7.统计词频 reduceByKey() 8.按字母顺序 ...
分类:
其他好文 时间:
2021-04-20 15:35:56
阅读次数:
0
定义一个学生类,包含学号、姓名、成绩等属性。(1)使用重载函数定义多个构造函数。(2)使用默认参数定义构造函数。 #include<iostream> #include<string> using namespace std; class Student { public: Student(){ n ...
分类:
编程语言 时间:
2021-04-20 14:48:10
阅读次数:
0
1、实体完整性规则 若一个属性(指一个或一组属性)A是基本关系R的主属性,则A不能取空值。空值就是不知道或者不存在的值 (1)实体完整性规则是针对基本关系而言的,一个基本表通常对应现实世界的一个实体集。例如学生关系对应学生的集合。 (2)现实世界的实体是可区分的,它们都具有唯一性标识。例如每个学生都 ...
分类:
其他好文 时间:
2021-04-20 14:11:37
阅读次数:
0
二、学生课程分数案例 总共有多少学生?map(), distinct(), count() 开设了多少门课程? 每个学生选修了多少门课?map(), countByKey() 每门课程有多少个学生选?map(), countByValue() Tom选修了几门课?每门课多少分?filter(), m ...
分类:
其他好文 时间:
2021-04-13 12:24:49
阅读次数:
0
题目大意 给n个学生的邮箱地址和成绩 和成绩分界点g 名人堂人数k 统计总共发多少奖学金 按要求输出名人堂(成绩从大到小 一样成绩的话按字典序输出) 代码 #include<bits/stdc++.h> using namespace std; struct Node { string s; int ...
分类:
其他好文 时间:
2021-04-07 11:06:05
阅读次数:
0