Scala集合常用方法解析
Java 集合 : 数据的容器,可以在内部容纳数据
List : 有序,可重复的
Set : 无序,不可重复
Map : 无序,存储K-V键值对,key不可重复
scala 集合 : 可变集合(ArrayList) & 不可变集合(数组)
String(不可变字符串), (StringBuilder, StringBuffer)(可变字符串)
集合的基本方法
val list: List[Int] = List(1,2,3,4)
// 反转集合
//println(list.reverse) //List(6, 5, 4, 3, 2, 1) //set,map没有反转
list.max
list.min
list.sum //求和
list.product //乘积 // TODO 排序
//val listStr = List("1", "5", "9", "11")
//println("排序 = " + listStr.sorted) //排序 = List(1, 11, 5, 9) 按照字典顺序; 数字、字符串都是按字符串的字典顺序排序 val stringList = List("11", "55", "13", "22")
// 1, 5, 3, 2
// 11 22 13 55
// TODO 排序 使用自定义排序规则进行排序
println(stringList.sortBy(x => {
x.substring(1, 2) //List(11, 22, 13, 55)
}))
//TODO 排序:升序,降序
println("升序= " + stringList.sortWith{ //升序= List(11, 13, 22, 55)
case (left, right) => {
left < right
}
})
println("降序= " + stringList.sortWith{ //降序= List(55, 22, 13, 11)
case (left, right) => {
left > right
}
})
TODO : 分组 groupBy(x=>{x%2})
println("分组= " +list.groupBy(x => { //分组= Map(1 -> List(1, 3, 5), 0 -> List(2, 4, 6))
x % 2
}))
聚合
Map 转换,映射
// map方法将集合中的每一个元素进行转换后放置到新的集合中
println(list.map(_ * 2)) //List(2, 4, 6, 8, 10, 12)
println(list.map((_, 1))) //List((1,1), (2,1), (3,1), (4,1), (5,1), (6,1))
flatMap 扁平化 数->可迭代
(整体,拆成一个个的个体变成可迭代的集合)
val list: List[Int] = List(1,2,3,4) // TODO flatMap 扁平化
val list2 = List(List(1,2), List(3, 4), List(5, 6)) // ==> List(1,2,3,4,5,6)
// in : List, out : Iterator
println("扁平化=" + list2.flatMap(x => x)) //扁平化=List(1, 2, 3, 4, 5, 6) 集合中整体拆成一个个的
reduce 化简,也称归约
// TODO reduce 化简
println(list.reduce((_ + _))) //10 两两聚合
println(list.reduce(_ - _)) //-8
println(list.reduceLeft(_ - _))//-8 同上,底层调用是一样的
println(list.reduceRight(_ - _)) //-2 从右边开始计算
fold 折叠foldLeft foldRight 缩写分别为 /: 和 :\
scala中两个map的合并 foldLeft
val list: List[Int] = List(1,2,3,4) // TODO fold fold和reduce比较类似,仅仅是多了一个集合之后的初始值
println(list.fold(10)(_ - _)) // -0 底层本质上就是调用的foldLeft(z)(op)
println(list.foldLeft(10)(_ - _)) //-0 // 1,2,3,4 ==> reverse ==> 4,3,2,1
// 底层运算时,将集合反转后相邻的元素交互调用逻辑
println(list.foldRight(0)(_ - _)) //-2
//reverse.foldLeft(z)((right, left) => op(left, right))
扫描 scanLeft
扫描,即对某个集合的所有元素做fold操作,但是会把产生的所有中间结果放置于一个集合中保存
def minus(num1: Int, num2: Int): Int = {
num1 - num2
}
val i1 = (1 to 5).scanLeft(5)(minus) //1 2 3 4 5
//5 4 2 -1 -5 -10
println(i1) //Vector(5, 4, 2, -1, -5, -10) def add( num1 : Int, num2 : Int ) : Int = {
num1 + num2
}
val i2 = (1 to 5).scanLeft(5)(add) //1 2 3 4 5
//5 6 8 11 15 20
println(i2) //Vector(5, 6, 8, 11, 15, 20)
集合交Intersect、差diff、合union
val lis1 = List(1,2,3,4)
val lis2 = List(3,4,5,6,7)
// 两个集合合并
println(lis1.union(lis2)) //List(1, 2, 3, 4, 3, 4, 5, 6, 7)
// 两个集合交集
println(lis1.intersect(lis2)) //List(3, 4)
// 两个集合差集
println(lis2.diff(lis1)) //List(5, 6, 7)
拉链,将两个集合进行 对偶元组合并,可以使用拉链
List1(1,2,3,4) List2(3,4,5,6,7) #多余的它会舍掉
println(lis1.zip(lis2)) //List((1,3), (2,4), (3,5), (4,6))
滑动窗口 sliding
// 滑动窗口window
val intses: Iterator[List[Int]] = list.sliding(3)
for (elem <- intses) {
println(elem) //List(1, 2, 3)
//List(2, 3, 4)
}
过滤filter a.filter(_%2 == 0)
// TODO 过滤
val a = List(1, 2, 3, 4)
def test(i: Int): Boolean = {
i % 2 == 0
}
println("过滤=" + a.filter(test)) //简化如下
println(a.filter(_ % 2 == 1))
wordcount
object TestWorldCount {
def main(args: Array[String]): Unit = {
// 数据
val lines = List("Hello Atguigu", "Hello Scala", "Hello Hbase", "Hi Atguigu")
// 将一行的数据进行分解,变成一个一个的单词(扁平化)
val words: List[String] = lines.flatMap(line => {line.split(" ")})
// 将扁平化后的单词进行分组
val groupNameToWordMap: Map[String, List[String]] = words.groupBy(word=>word)
// 将分组后的数据转换为单词和数量的结构 _1是单词分组名称; t._2是集合
val wordToCountMap: Map[String, Int] = groupNameToWordMap.map(t=>{(t._1, t._2.size)})
// 将转换后的数据进行排序
// map(k-v, k1-v1, k2-v2) ==> List((k,v), (k1,v1))
val resultList: List[(String, Int)] = wordToCountMap.toList.sortWith {
case (left, right) => {
left._2 > right._2 //元组, 根据v去比较判断
}
}
---------------简化版-------------------------------
val resultList: List[(String, Int)] = lines.flatMap(_.split(" ")).groupBy(word => word).map(t => {
(t._1, t._2.size)
}).toList.sortWith {
case (left, right) => {
left._2 > right._2
}
}
-----------------------------------------
resultList resultList.foreach(println)
} }
map中_1 key, _2 value
array考虑泛型,map的k,v不考虑泛型
Scala集合常用方法解析的更多相关文章
- Scala实战高手****第6课 :零基础实战Scala集合操作及Spark源码解析
本课内容1.Spark中Scala集合操作鉴赏2.Scala集合操作实战 --------------------------------------------------------------- ...
- Scala集合类型详解
Scala集合 Scala提供了一套很好的集合实现,提供了一些集合类型的抽象. Scala 集合分为可变的和不可变的集合. 可变集合可以在适当的地方被更新或扩展.这意味着你可以修改,添加,移除一个集合 ...
- Scala函数式编程(三) scala集合和函数
前情提要: scala函数式编程(二) scala基础语法介绍 scala函数式编程(二) scala基础语法介绍 前面已经稍微介绍了scala的常用语法以及面向对象的一些简要知识,这次是补充上一章的 ...
- Scala词法文法解析器 (二)分析C++类的声明
最近一直在学习Scala语言,偶然发现其Parser模块功能强大,乃为BNF而设计.啥是BNF,读大学的时候在课本上见过,那时候只觉得这个东西太深奥.没想到所有的计算机语言都是基于BNF而定义的一套规 ...
- Scala词法文法解析器 (一)解析SparkSQL的BNF文法
平台公式及翻译后的SparkSQL 平台公式的样子如下所示: if (XX1_m001[D003]="邢おb7肮α䵵薇" || XX1_m001[H003]<"2& ...
- JavaScript数组常用方法解析和深层次js数组扁平化
前言 数组作为在开发中常用的集合,除了for循环遍历以外,还有很多内置对象的方法,包括map,以及数组筛选元素filter等. 注:文章结尾处附深层次数组扁平化方法操作. 作为引用数据类型的一种,在处 ...
- 前端开发:Javascript中的数组,常用方法解析
前端开发:Javascript中的数组,常用方法解析 前言 Array是Javascript构成的一个重要的部分,它可以用来存储字符串.对象.函数.Number,它是非常强大的.因此深入了解Array ...
- Scala集合操作
大数据技术是数据的集合以及对数据集合的操作技术的统称,具体来说: 1.数据集合:会涉及数据的搜集.存储等,搜集会有很多技术,存储技术现在比较经典方案是使用Hadoop,不过也很多方案采用Kafka. ...
- Device Tree常用方法解析
Device Tree常用方法解析 Device Tree在Linux内核驱动中的使用源于2011年3月17日Linus Torvalds在ARM Linux邮件列表中的一封邮件,他宣称“this w ...
随机推荐
- FileZilla-01
FileZilla FTP-client可用于通过上传和下载文件和图像来管理WordPress网站. 设置选项: 01.网址:ftp地址(如果网址是http://example.com,则通常是ftp ...
- 自用windows小软件
好用的软件的定义:没有广告,提升效率,最低的内存占用,体积小 1.解压工具 bandizip:自动解压功能,棒呆了 网址:https://www.bandisoft.com/ 2.pdf阅读编辑工具 ...
- Python并发编程之同步\异步and阻塞\非阻塞
一.什么是进程 进程: 正在进行的一个过程或者说一个任务.而负责执行任务则是cpu. 进程和程序的区别: 程序仅仅只是一堆代码而已,而进程指的是程序的运行过程. 需要强调的是:同一个程序执行两次,那也 ...
- Python项目读取配置的几种方式
1. 将配置写在Python文件中 配置文件(config.py 或 settings.py) 通常放置在程序源代码的目录,方便引用 配置文件 # settings.py class Config(o ...
- zabbix Server 4.0 部署及之内置item使用案例
zabbix Server 4.0 部署及之内置item使用案例 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.zabbix组件架构概述(图片摘自网络) 1>.zabbi ...
- [物理学与PDEs]第3章习题2 仅受重力作用的定常不可压流理想流体沿流线的一个守恒量
设定常 (即 $\cfrac{\p {\bf u}}{\p t}={\bf 0}$).不可压缩 (设 $\rho=1$) 的理想流体所受的体积力仅为重力. 又设磁场满足条件: $({\bf H}\cd ...
- MySQL5.6.39修改密码
5.6.39 苹果->系统偏好设置->最下边点mysql 在弹出页面中 关闭mysql服务(点击stop mysql server) step2: 进入终端输入:cd /usr/local ...
- luogu P5286 [HNOI2019]鱼
传送门 这题真的牛皮,还好考场没去刚( 这题口胡起来真的简单 首先枚举D点,然后对其他所有点按极角排序,同时记录到D的距离.然后按照极角序枚举A,那么鱼尾的两个点的极角范围就是A关于D对称的那个向量, ...
- COM 类工厂中 CLSID 为 {000209FF-0000-0000-C000-000000000046} 的组件失败,原因是出现以下错误: 80070005 拒绝访问。最新解决方案
检索 COM 类工厂中 CLSID 为 {000209FF-0000-0000-C000-000000000046} 的组件失败,原因是出现以下错误: 80070005 拒绝访问. (异常来自 HRE ...
- 🍓JavaScript 对象原型链继承的弊端 🍓