搜索结果
查询Tags标签： 每门，共有 44条记录-
08 学生课程分数的Spark SQL分析
总共有多少学生？总共开设了哪些课程 每个学生选修了多少门课？每门课程有多少个学生选？每门课程大于95分的学生人数？Tom选修了几门课？每门课多少分？Tom的成绩按分数大小排序。 Tom的平均分。 求每门课的平均分，最高分，最低分。 求每门课的选修人数及平均分，精确到…
2021/5/23 2:26:20 人评论 次浏览 -
08 学生课程分数的Spark SQL分析
每个分数+5分。 总共有多少学生？总共开设了哪些课程？每个学生选修了多少门课？每门课程有多少个学生选？每门课程大于95分的学生人数？Tom选修了几门课？每门课多少分？Tom的成绩按分数大小排序。 Tom的平均分。 求每门课的平均分，最高分，最低分。
2021/5/21 19:25:48 人评论 次浏览 -
08 学生课程分数的Spark SQL分析
用DataFrame的操作或SQL语句完成以下数据分析要求，并和用RDD操作的实现进行对比：每个分数+5分。 总共有多少学生？总共开设了哪些课程？每个学生选修了多少门课？每门课程有多少个学生选？每门课程大于95分的学生人数？Tom选修了几门课？每门课多少分？Tom的成绩按分数大…
2021/5/21 2:25:09 人评论 次浏览 -
学生课程分数的Spark SQL分析
读学生课程分数文件chapter4-data01.txt，创建DataFrame。 用DataFrame的操作或SQL语句完成以下数据分析要求，并和用RDD操作的实现进行对比：每个分数+5分。 总共有多少学生？ 总共开设了哪些课程？ 每个学生选修了多少门课？ 每门课程有多少个学生选？ 每门课程大于95分…
2021/5/20 19:55:28 人评论 次浏览 -
08 学生课程分数的Spark SQL分析
1.用DataFrame的操作或SQL语句完成以下数据分析要求： 2.总共有多少学生？3.开设了多少门课程？ 4.每个学生选修了多少门课？ 5.每门课程有多少个学生选？ 6.Tom选修了几门课？每门课多少分？ 7.Tom的成绩按分数大小排序。 8.Tom的平均分。 9.每个分数+5分。 10.求每门课的…
2021/5/20 2:28:29 人评论 次浏览 -
08 学生课程分数的Spark SQL分析
读学生课程分数文件chapter4-data01.txt，创建DataFrame。 1.生成“表头” 2.生成“表中的记录” 3.把“表头”和“表中的记录”拼装在一起 用DataFrame的操作或SQL语句完成以下数据分析要求，并和用RDD操作的实现进行对比：每个分数+5分。 总共有多少学生？ 总共开设了哪…
2021/5/20 2:26:30 人评论 次浏览 -
08 学生课程分数的Spark SQL分析
读学生课程分数文件chapter4-data01.txt，创建DataFrame：用DataFrame的操作或SQL语句完成以下数据分析要求，并和用RDD操作的实现进行对比： 1.每个分数+5分。2.总共有多少学生？3.总共开设了哪些课程？4.每个学生选修了多少门课？5.每门课程有多少个学生选？6.每门课程大…
2021/5/19 19:31:58 人评论 次浏览 -
08 学生课程分数的Spark SQL分析
读学生课程分数文件chapter4-data01.txt，创建DataFrame。 url = "file:///usr/local/spark/mycode/rdd/chapter4-data01.txt" rdd = spark.sparkContext.textFile(url).map(lambda line:line.split(,)) rdd.take(3)from pyspark.sql.types import IntegerType,…
2021/5/18 19:25:24 人评论 次浏览 -
08 学生课程分数的Spark SQL分析
读学生课程分数文件chapter4-data01.txt，创建DataFrame。 1.用DataFrame的操作或SQL语句完成以下数据分析要求：2.总共有多少学生？3.开设了多少门课程？4.每个学生选修了多少门课？5.每门课程有多少个学生选？6.Tom选修了几门课？每门课多少分？7.Tom的成绩按分数大小排…
2021/5/18 2:57:16 人评论 次浏览 -
学生课程分数的Spark SQL分析
读学生课程分数文件chapter4-data01.txt，创建DataFrame。url = "file:///D:/chapter4-data01.txt" rdd = spark.sparkContext.textFile(url).map(lambda line:line.split(,)) rdd.take(3)from pyspark.sql.types import IntegerType,StringType,StructField,St…
2021/5/18 2:56:52 人评论 次浏览 -
06 RDD编程
06 RDD编程学生课程分数案例 总共有多少学生？map(), distinct(), count() 开设了多少门课程？每个学生选修了多少门课？map(), countByKey()每门课程有多少个学生选？map(), countByValue()Tom选修了几门课？每门课多少分？filter(), map() Tom选修了几门课？每门课多少…
2021/4/23 22:29:44 人评论 次浏览 -
05 RDD编程
一、词频统计：读文本文件生成RDD lines将一行一行的文本分割成单词 words flatmap()全部转换为小写 lower()去掉长度小于3的单词 filter()去掉停用词转换成键值对 map()统计词频 reduceByKey()按字母顺序排序按词频排序 10、结果文件保存 saveAsTextFile(out_url) 二、学…
2021/4/22 20:25:25 人评论 次浏览 -
05 RDD编程
一、词频统计： 读文本文件生成RDD lines 将一行一行的文本分割成单词 words flatmap()全部转换为小写 lower()去掉长度小于3的单词 filter()去掉停用词 转换成键值对 map()统计词频 reduceByKey()按字母顺序排序 sortBy(f)按词频排序 sortByKey() 结果文件保存 saveAsTex…
2021/4/19 14:25:16 人评论 次浏览 -
05 RDD编程
按字母顺序排序 sortBy(f) 按词频排序 sortByKey()二、学生课程分数案例总共有多少学生？map(), distinct(), count()开设了多少门课程？每个学生选修了多少门课？map().countByValue() //map(), countByKey()每门课程有多少个学生选？map(), countByValue()To…
2021/4/19 12:55:13 人评论 次浏览 -
06 RDD编程
总共有多少学生？map(), distinct(), count()开设了多少门课程？ 每个学生选修了多少门课？map().countByValue() //map(), countByKey() 每门课程有多少个学生选？map(), countByValue() Tom选修了几门课？每门课多少分？filter(), map() RDD Tom选修了几门课？…
2021/4/19 12:55:10 人评论 次浏览
