scala学习笔记-集合操作（15）

Scala的集合体系结构

1 // Scala中的集合体系主要包括：Iterable、Seq、Set、Map。其中Iterable是所有集合trait的根trai。这个结构与Java的集合体系非常相似。
2
3 // Scala中的集合是分成可变和不可变两类集合的，其中可变集合就是说，集合的元素可以动态修改，而不可变集合的元素在初始化之后，就无法修改了。分别对应scala.collection.mutable和scala.collection.immutable两个包。
4
5 // Seq下包含了Range、ArrayBuffer、List等子trait。其中Range就代表了一个序列，通常可以使用“1 to 10”这种语法来产生一个Range。 ArrayBuffer就类似于Java中的ArrayList。

List

 1 // List代表一个不可变的列表2 // List的创建，val list = List(1, 2, 3, 4)3 // List有head和tail，head代表List的第一个元素，tail代表第一个元素之后的所有元素，list.head，list.tail4 // List有特殊的::操作符，可以用于将head和tail合并成一个List，0 :: list5 // ::这种操作符要清楚，在spark源码中都是有体现的，一定要能够看懂！6 // 如果一个List只有一个元素，那么它的head就是这个元素，它的tail是Nil7 8 // 案例：用递归函数来给List中每个元素都加上指定前缀，并打印加上前缀的元素9 def decorator(l: List[Int], prefix: String) {
10   if (l != Nil) {
11     println(prefix + l.head)
12     decorator(l.tail, prefix)
13   }
14 }

LinkedList

 1 // LinkedList代表一个可变的列表，使用elem可以引用其头部，使用next可以引用其尾部2 // val l = scala.collection.mutable.LinkedList(1, 2, 3, 4, 5); l.elem; l.next3 4 // 案例：使用while循环将LinkedList中的每个元素都乘以25 val list = scala.collection.mutable.LinkedList(1, 2, 3, 4, 5)6 var currentList = list7 while (currentList != Nil) {8   currentList.elem = currentList.elem * 29   currentList = currentList.next
10 }
11
12 // 案例：使用while循环将LinkedList中，从第一个元素开始，每隔一个元素，乘以2
13 val list = scala.collection.mutable.LinkedList(1, 2, 3, 4, 5, 6, 7, 8, 9, 10)
14 var currentList = list
15 var first = true
16 while (currentList != Nil && currentList.next != Nil) {
17   if (first) { currentList.elem = currentList.elem * 2; first = false }
18   currentList  = currentList.next.next
19   if (currentList != Nil) currentList.elem = currentList.elem * 2
20 }

Set

1 // Set代表一个没有重复元素的集合
2 // 将重复元素加入Set是没有用的，比如val s = Set(1, 2, 3); s + 1; s + 4
3 // 而且Set是不保证插入顺序的，也就是说，Set中的元素是乱序的，val s = new scala.collection.mutable.HashSet[Int](); s += 1; s += 2; s += 5
4
5 // LinkedHashSet会用一个链表维护插入顺序，val s = new scala.collection.mutable.LinkedHashSet[Int](); i += 1; s += 2; s += 5
6
7 // SrotedSet会自动根据key来进行排序，val s = scala.collection.mutable.SortedSet("orange", "apple", "banana")

集合的函数式编程

 1 // 集合的函数式编程非常非常非常之重要！！！2 // 必须完全掌握和理解Scala的高阶函数是什么意思，Scala的集合类的map、flatMap、reduce、reduceLeft、foreach等这些函数，就是高阶函数，因为可以接收其他函数作为参数3 // 高阶函数的使用，也是Scala与Java最大的一点不同！！！因为Java里面是没有函数式编程的，也肯定没有高阶函数，也肯定无法直接将函数传入一个方法，或者让一个方法返回一个函数4 // 对Scala高阶函数的理解、掌握和使用，可以大大增强你的技术，而且也是Scala最有诱惑力、最有优势的一个功能！！！5 // 此外，在Spark源码中，有大量的函数式编程，以及基于集合的高阶函数的使用！！！所以必须掌握，才能看懂spark源码6 7 // map案例实战：为List中每个元素都添加一个前缀8 List("Leo", "Jen", "Peter", "Jack").map("name is " + _)9
10 // faltMap案例实战：将List中的多行句子拆分成单词
11 List("Hello World", "You Me").flatMap(_.split(" "))
12
13 // foreach案例实战：打印List中的每个单词
14 List("I", "have", "a", "beautiful", "house").foreach(println(_))
15
16 // zip案例实战：对学生姓名和学生成绩进行关联
17 List("Leo", "Jen", "Peter", "Jack").zip(List(100, 90, 75, 83))

函数式编程综合案例：统计多个文本内的单词总数

 1 // 使用scala的io包将文本文件内的数据读取出来2 val lines01 = scala.io.Source.fromFile("C://Users//Administrator//Desktop//test01.txt").mkString3 val lines02 = scala.io.Source.fromFile("C://Users//Administrator//Desktop//test02.txt").mkString4 // 使用List的伴生对象，将多个文件内的内容创建为一个List5 val lines = List(lines01, lines02)6 7 // 下面这一行才是我们的案例的核心和重点，因为有多个高阶函数的链式调用，以及大量下划线的使用，如果没有透彻掌握之前的课讲解的Scala函数式编程，那么下面这一行代码，完全可能会看不懂！！！8 // 但是下面这行代码其实就是Scala编程的精髓所在，就是函数式编程，也是Scala相较于Java等编程语言最大的功能优势所在9 // 而且，spark的源码中大量使用了这种复杂的链式调用的函数式编程
10 // 而且，spark本身提供的开发人员使用的编程api的风格，完全沿用了Scala的函数式编程，比如Spark自身的api中就提供了map、flatMap、reduce、foreach，以及更高级的reduceByKey、groupByKey等高阶函数
11 // 如果要使用Scala进行spark工程的开发，那么就必须掌握这种复杂的高阶函数的链式调用！！！
12
13 lines.flatMap(_.split(" ")).map((_, 1)).map(_._2).reduceLeft(_ + _)

scala学习笔记-集合操作（15）相关推荐

scala 学习笔记--集合
1.scala集合的null 是nil 而不是null 2.set的三个方法union,intersect,diff union--合并去重 intersect--交集 diff--a减去(a和b交集 ...
Scala学习笔记（一）
Scala学习笔记(一) 一.Scala简介二.Scala安装与配置 1. 安装JDK 2. 安装Scala SDK 3. 安装IDEA插件三.Scala解释器 1. 启动Scala解释器 2. ...
一文弄懂元学习 (Meta Learing)（附代码实战）《繁凡的深度学习笔记》第 15 章元学习详解（上）万字中文综述
<繁凡的深度学习笔记>第 15 章元学习详解 (上)万字中文综述(DL笔记整理系列) 3043331995@qq.com https://fanfansann.blog.csdn.net ...
Scala学习笔记（三）
Scala学习笔记(三) 一.模式匹配 1. 简单模式匹配 2. 匹配类型 3. 守卫 4. 匹配样例类 5. 匹配数组 6. 匹配列表 7. 匹配元组 8. 变量声明中的模式匹配 8.1 获取数组中 ...
Scala 学习笔记
Scala 学习笔记 1 object func_exp { 2 println("Welcome to the Scala worksheet") //> Welcome ...
memcached高速缓存学习笔记002---telnet操作memcached
memcached高速缓存学习笔记002---telnet操作memcached 停止memcached memcached.exe -d stop 停止 memcached.exe -p 112 ...
python学习笔记——集合与字典
python学习笔记--集合与字典 1. 集合的基本概念 1.1 set(x)函数 1.2 集合类型的10个操作函数 2. 字典的基本概念 2.1 字典的索引 2.2 字典的操作 2.3 字典小结 1 ...
Scala学习笔记04：内建控制结构
Scala学习笔记04:内建控制结构 scala提供的控制结构并不算多,因为在函数式编程中,可以自己开发出各种功能的控制结构,所以scala提供的原生控制结构仅仅够用为止. 1.if - 判断 if是 ...
Scala学习笔记03：操作符
Scala学习笔记03:操作符一.scala中操作符与方法的等价性 scala中操作符即方法.方法即操作符.scala中操作符其实是普通方法调用的另一种表现形式,运算符的使用其实就是隐含地调用对应的 ...

scala学习笔记-集合操作（15）

scala学习笔记-集合操作（15）相关推荐

最新文章

热门文章