练习

package scala_01.practice

import org.junit.{Before, Test}

import scala.collection.immutable
import scala.collection.immutable.StringOps
import scala.collection.mutable.ListBuffer
import scala.io.Source /**
* 1、统计班级人数
* 2、统计学生的总分
*/ class Practice1 { var students: List[Student] = _
var score: List[Score] = _
var cource: List[Cource] = _ @Before
def read_file(): Unit = {
// 读取students.txt数据
// 这里路径不能是 scala/data/students.txt
students = Source.fromFile("data/students.txt")
.getLines()
.toList
.map(s => {
val spilts: Array[String] = s.split(",")
val id: String = spilts(0)
val name: String = spilts(1)
val age: Int = spilts(2).toInt
val gender: String = spilts(3)
val clazz: String = spilts(4)
Student(id, name, age, gender, clazz)
}) // 读取Score.txt数据
score = Source.fromFile("data/score.txt")
.getLines()
.toList
.map(s => {
val splits: Array[String] = s.split(",")
val id: String = splits(0)
val sub_id: String = splits(1)
val score_sc: Int = splits(2).toInt
Score(id, sub_id, score_sc)
}) // 读取Cource.txt数据
cource = Source.fromFile("data/cource.txt")
.getLines()
.toList
.map(s => {
val splits: Array[String] = s.split(",")
val sub_id: String = splits(0)
val sub_name: String = splits(1)
val score_max: Int = splits(2).toInt
Cource(sub_id, sub_name, score_max)
}) } @Test
def printAll: Unit = {
students.take(10).foreach(println)
score.take(10).foreach(println)
cource.take(10).foreach(println)
} // 1、统计班级人数
@Test
def count_students: Unit = {
val count_stu: Map[String, Int] = students
.groupBy(s => s.clazz)
.map(kv => (kv._1, kv._2.size))
count_stu.foreach(println) } // 2、统计学生的总分
@Test
def sum_score: Unit = {
val sum_sc: Map[String, Int] = score.groupBy(s => s.id)
.map(kv => {
val id: String = kv._1
val score_sc: List[Score] = kv._2
val sum_s = score_sc.map(s => s.score_sc).sum
(id, sum_s)
}) sum_sc.foreach(println)
} @Test
// 1、统计年级排名前十学生各科的分数 [学号,学生姓名,学生班级,科目名,分数]
def um_score_top10_stu: Unit = { //先拿到排名前十的学生id
val top10ids: List[String] = score.groupBy(s => s.id)
.map(kv => {
val id: String = kv._1
val score_sc: List[Score] = kv._2
val sum_s = score_sc.map(s => s.score_sc).sum
(id, sum_s)
}).toList
.sortBy(s => (-s._2)) // 按照总分倒序排列
.take(10)
.map(s => s._1) // 直接取出id // 将score转成kv格式的Map集合
// 将id作为key Score对象作为value
val scomap: Map[String, List[(String, Score)]] = score.map(kv => {
val id: String = kv.id
val values: Score = kv
(id, values)
}).groupBy(kv => kv._1) // 将cource_id作为key cource_name作为value 构建subMap
val submap: Map[String, String] = cource.map(s => (s.sub_id, s.sub_name)).toMap val result: List[(String, String, String, String, Int)] = students.filter(s => {
top10ids.contains(s.id)
}).flatMap(s => {
// 初始化一个ListBuffer用于保留最后的结果
// ListBuffer中每个元素的类型是一个5元组(同题目需要的5列结果类型一一对应) val tuples: ListBuffer[(String, String, String, String, Int)] = ListBuffer[(String, String, String, String, Int)]()
val id: String = s.id
val name: String = s.name
val clazz: String = s.clazz
// 根据学生id从scoMap中将该学生的6门科目的分数取出来 得到一个Score对象构成的List
val scores: List[Score] = scomap(s.id).map(_._2)
// 遍历每个学生的6门科目成绩
scores.map(sco => {
val sub_id: String = sco.sub_id
val score_sc: Int = sco.score_sc
// 根据科目id从subMap中取出科目名称
val sub_name: String = submap(sub_id)
tuples.append((id, name, clazz, sub_name, score_sc))
})
tuples
})
result.foreach(println)
} // 2、统计总分大于年级平均分的学生 [学号,姓名,班级,总分]
@Test
def sum_score_beyond_avg: Unit = { // 年级的总分拿过来
val sum_sc: Map[String, Int] = score.groupBy(s => s.id)
.map(kv => {
val id: String = kv._1
val score_sc: List[Score] = kv._2
val sum_s = score_sc.map(s => s.score_sc).sum
(id, sum_s)
})
// 计算年级平均分
val bigsum: Int = sum_sc.map(_._2).sum
val avg: Double = bigsum / (sum_sc.size.toDouble)
println(avg) // 以学生id作为key Students对象最为value 构建stuMap
val stumap: Map[String, Student] = students.map(s => (s.id, s)).toMap sum_sc.filter(kv => kv._2 > avg) // 过滤出成绩大于年级平均分的学生
.map(kv => {
val id: String = kv._1
val sum_ss: Int = kv._2
// 根据学生id从stuMap中提取出学生信息
val stu: Student = stumap(id)
val name: String = stu.name
val clazz: String = stu.clazz
(id, name, clazz, sum_ss)
}).foreach(println) } // 3、统计每科都及格的学生 [学号,姓名,班级,科目,分数]
@Test
def every_subject_pass: Unit = {
// 每门科目的及格分数Map
// k:科目id v:二元组(科目名称,科目及格分数)
val sub_pass_map: Map[String, (String, Double)] = cource.map(s => {
val id: String = s.sub_id
val sub_name: String = s.sub_name
val pass_score: Double = (s.score_max) * 0.6
(id, (sub_name, pass_score))
}).toMap // 所有6门科目都及格的学生id
val pass_id: List[String] = score
.filter(s => s.score_sc > sub_pass_map(s.sub_id)._2)
.groupBy(kv => kv.id)
.map(kv => (kv._1, kv._2.size))
.filter(s => s._2 == 6)
.map(s => s._1)
.toList val groupsc: Map[String, List[(String, Score)]] = score.map(s => (s.id, s)).groupBy(_._1) students.filter(s => pass_id.contains(s.id))
.map(s => {
val lb: ListBuffer[(String, String, String, String, Int)] = ListBuffer[(String, String, String, String, Int)]() val id: String = s.id
val name = s.name
val clazz = s.clazz // 根据学生id从scoMap中将该学生的6门科目的分数取出来 得到一个Score对象构成的List
val scores: List[Score] = groupsc(id).map(_._2)
// 遍历每个学生的6门科目成绩
scores.map(s => {
val score_sc: Int = s.score_sc
val sub_id: String = s.sub_id
val sub_name: String = sub_pass_map(sub_id)._1 lb.append((id, name, clazz, sub_name, score_sc)) })
lb }).foreach(println) } @Test
// 4、统计每个班级的前三名 [学号,姓名,班级,分数]
def clazz_sum_score_top3: Unit = { // 学生总分
val id_sum_core: Map[String, Int] = score.groupBy(s => s.id)
.map(kv => {
val id: String = kv._1
val sum_sc: Int = kv._2.map(s => s.score_sc).sum
(id, sum_sc)
}) // 根据学生id 从id_sum_score中获取学生总分
students.map(s => (s.id, s.name, s.clazz, id_sum_core(s.id)))
.groupBy(s => s._3)
.flatMap(kv => {
val clazz: String = kv._1
val stuList: List[(String, String, String, Int)] = kv._2
val top3: List[(String, String, String, Int)] = stuList.sortBy(s => s._4)
.take(3) top3
}).foreach(println) } // 5、统计偏科最严重的前100名学生 [学号,姓名,班级,科目,分数]
@Test
def unbalanceTop100: Unit ={ val cour_map: Map[String, Int] = cource.map(s => {
val sub_id: String = s.sub_id
val score_max: Int = s.score_max
(sub_id, score_max)
}).toMap //每个学生的百分制分数
val per_score: List[(String, Double)] = score.map(s => {
val id: String = s.id
val score_sc: Int = s.score_sc
val sub_id: String = s.sub_id
val score_max: Int = cour_map(sub_id)
val per_sco: Double = (score_sc / score_max.toDouble) * 100
(id, per_sco)
}) //学生平均分
val stu_avg: Map[String, Double] = per_score.groupBy(s => s._1)
.map(kv => {
val id: String = kv._1
val values: List[(String, Double)] = kv._2
val sum: Double = values.map(s => s._2).sum
val avg: Double = sum / values.size.toDouble
(id, avg)
}) // 求100位方差
val top100: List[String] = per_score.map(kv => {
val id: String = kv._1
val per_sco: Double = kv._2
val avg: Double = stu_avg(id)
val fenzi: Double = math.pow((avg - per_sco), 2)
(id, fenzi)
}).groupBy(_._1)
.map(kv => {
val id: String = kv._1
val size: Int = kv._2.size
val fancha: Double = kv._2.map(_._2).sum / size
(id, fancha)
}).toList
.sortBy(-_._2)
.map(_._1)
.take(100) val cou_map: Map[String, String] = cource.map(s=>(s.sub_id,s.sub_name)).toMap val sco_map: Map[String, List[Score]] = score.groupBy(_.id) students.filter(s=>top100.contains(s.id))
.flatMap(s=>{ val tuples: ListBuffer[(String, String, String, String, Int)] = ListBuffer[(String,String,String,String,Int)]()
val id: String = s.id
val name: String = s.name
val clazz: String = s.clazz sco_map(id).foreach(s=>{
val sub_id: String = s.sub_id
val score_sc: Int = s.score_sc
val sub_name: String = cou_map(sub_id)
tuples.append((id,name,clazz,sub_name,score_sc)) }) tuples }).foreach(println) } case class Student(id: String, name: String, age: Int, gender: String, clazz: String) case class Score(id: String, sub_id: String, score_sc: Int) case class Cource(sub_id: String, sub_name: String, score_max: Int) }

Scala语法2的更多相关文章

  1. scala语法在spark withScope上的应用

    withSpout在spark中是用来做DAG可视化的,它在代码里的用法如下(以map为例,spark 2.0.0版本) def map[U: ClassTag](f: T => U): RDD ...

  2. scala语法解析(解码指环)

    看惯了JAVA的语法,再看scala的语法,有的晦涩难懂.正好遇到一个介绍scala语法的文章,就直接截图留念.省的再临时抱佛脚了.

  3. 1.scala语法

    对象的apply方法 (1)对象调用apply()方法,可省略成() (2)string对象的apply方法返回第n个字符 "hello"(4) //'o' if语句的返回值 ja ...

  4. Scala语法笔记

    JAVA中,举例你S是一个字符串,那么s(i)就是该字符串的第i个字符(s.charAt(i)).Scala中使用apply的方法 JAVA与C++的?:操作符 等同于Scala的 if ( x &g ...

  5. Java和Scala语法比较

    类型推断 挑逗指数: 四星 我们知道,Scala一向以强大的类型推断闻名于世.很多时候,我们无须关心Scala类型推断系统的存在,因为很多时候它推断的结果跟直觉是一致的. Java在2016 年也新增 ...

  6. Spark记录-Scala语法基础

    参考:http://docs.scala-lang.org/cheatsheets/index.html.http://docs.scala-lang.org/.http://www.scala-la ...

  7. Scala 语法基础

    一 简介 Scala 是一门多范式(multi-paradigm)的编程语言,设计初衷是要集成面向对象编程和函数式编程的各种特性.Scala 运行在Java虚拟机上,并兼容现有的Java程序.Scal ...

  8. Scala 语法(一)

    (1)基本语法 变量 val var(可变变量): 数据类型 Byte,Char,Int,Short,Long,String(字符),Float,Double,Boolean(true,flase). ...

  9. scala语法

    1:双重for循环(相当于j是i的内存循环):for (i <-0 to n; j <-10 to 20){ println(i);println(j)} 2:单层for循环:for (i ...

  10. Scala语法(二)

    (1)类,对象 //定义类(属性.方法),实例化对象 class counter{ *//主构造器 class counter(name:String,mode:Int){ ... } 实例化:val ...

随机推荐

  1. 对于网络请求ajax理解

    先对原生Ajax进行理解: Ajax=异步JS和XML,用于创建快速动态网页的技术 可以使网页实现异步更新.这意味着可以在不重新加载整个网页的情况下,对网页的某部分进行更新. 工作原理 对于Ajax的 ...

  2. Html CSS的三种链接方式

    感谢原文:https://blog.csdn.net/abc5382334/article/details/24260817 感谢原文:https://blog.csdn.net/jiaqingge/ ...

  3. rabbitmq-direct(直接交换模式)

    生产者和消费者,具有相同的交换机名称(Exchange).交换机类型和相同的密匙(routingKey),那么消费者即可成功获取到消息.(PS:相对比只要交换机名称即可接收到消息的广播模式(fanou ...

  4. IAAS, SAAS, PAAS

    原文是Pizza‐as‐a‐Service: a detailed view,用来类比Cloud Service Models.出处来自于Data Sovereignty and the Cloud ...

  5. 读取.properties配置文件的方式

    一.Properties类解读: 1.Properties类本质其实还是HashTabe,及底层的实现是HashTable public class Properties extends Hashta ...

  6. Xcode 插件失效,启动崩溃解决

    升级6.4点击 Alcatraz PackageManager 崩溃解决 进入插件安装目录 cd ~/Library/Application\ Support/Developer/Shared/Xco ...

  7. Squid代理服务器应用

    Squid代理服务器应用 目录 Squid代理服务器应用 一.Squid的脚本概念 1. Squid的作用 2. Web代理的工作机制 3. 代理服务器的概念 4. 代理服务器的作用 5. 代理的基本 ...

  8. docker | jenkins 实现自动化CI/CD,后端躺着把运维的钱挣了!(下)

    前言 在上一篇文章中,我们使用docker编写Dockerfile文件,将我们自己的项目构建成镜像,然后发布到Docker Hub中,并且用自己的云服务器拉取Docker Hub上我们自己上传的项目镜 ...

  9. Linux中使用systemctl操作服务、新建自定义服务

    Linux有12种Unit,对于个人来讲,用的最多的是Service Unit,下面的Unit均指Service Unit(服务单元) # 启动Unit systemctl start appname ...

  10. 总结下Mac环境下按照appium

    第10天休息 先来总结下Mac环境下按照appium 一.相关网站 官网: http://appium.io/ 测试论坛 https://testerhome.com/wiki 二.环境准备   从官 ...