脚本宝典收集整理的这篇文章主要介绍了SparkSQL综合作业，脚本宝典觉得挺不错的，现在分享给大家，也给大家做个参考。

准备： 创建RDD，并转换为DataFrame；scm持久化；创建spark.SQL临时表等预处理：

 

1.总共有多少学生？

RDD

 

DataFrame

 

spark.sql

 

2.开设了多少门课程？

RDD

 

DataFrame

 

spark.sql

 

3.每个学生选修了多少门课？

RDD

 

DataFrame

 

 

spark.sql

 

 

4.每门课程有多少个学生选？

RDD

 

 

DataFrame

 

 

spark.sql

 

 

5.每门课程>95分的学生人数

RDD

 

DataFrame

spark.sql

6.课程'Python'有多少个100分？

RDD

 

 

DataFrame

 

 

spark.sql

 

7.Tom选修了几门课？每门课多少分？

RDD

 

DataFrame

spark.sql

 

8.Tom的成绩按分数大小排序。

RDD

 

DataFrame

 

spark.sql

 

9.Tom选修了哪几门课？

RDD

 

 

DataFrame

 

 

spark.sql

 

 

10.Tom的平均分。

RDD

 

 

DataFrame

 

 

spark.sql

 

 

11.'operatingSystem'不及格人数

RDD

 

 

DataFrame

 

 

spark.sql

 

 

12.'OPEratingSystem'平均分

RDD

 

 

DataFrame

 

 

spark.sql

 

 

13.'OperatingSystem'90分以上人数

RDD

 

 

DataFrame

 

 

spark.sql

 

 

14.'OperatingSystem'前3名 

RDD

 

 

DataFrame

 

 

spark.sql

 

15.每个分数按比例+20平时分。

RDD

 

 

DataFrame

 

 

spark.sql

 

 

16.求每门课的平均分

RDD

 

 

DataFrame

 

 

spark.sql

 

 

17.选修了7门课的有多少个学生？

RDD

 

 

DataFrame

 

 

spark.sql

 

 

18.每门课的选修人数、平均分、不及格人数、通过率

RDD

 

 

DataFrame

 

 

spark.sql

 

19.优秀、良好、通过和不合格各有多少人？

 

20.同时选修了DataStructure和 DataBase 的学生

 

21.选修了DataStructure 但没有选修 DataBase 的学生

 

22.选修课程数少于3门的同学

 

23.选修6门及以上课程数的同学

 

24.查询平均成绩大于等于60分的姓名和平均成绩

 

25.找出平均分最高的10位同学

 

脚本宝典总结

以上是脚本宝典为你收集整理的SparkSQL综合作业全部内容，希望文章能够帮你解决SparkSQL综合作业所遇到的问题。

如果觉得脚本宝典网站内容还不错，欢迎将脚本宝典推荐好友。

本图文内容来源于网友网络收集整理提供，作为学习参考使用，版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ：384754419，请注明来意。