scala和spark笔记.pdf

1.1 打包部署1 1.2 Map2 1.3 Tuple 元组3 1.4 Iterable 的map 和flatmap 函数3 1.5 Set4 1.6 线程安全相关trait 和class5 1.7 类5 1.7.1 构造函数6 1.7.2 Bean 属性6 1.8 注解 Annotation7 1.9 访问修饰符7 1.10 Object7 1.10.1 单例模式8 1.11 伴生对象9 1.12 伴生对象的apply 方法用途10 1.13 继承11 1.14 Scala 类层级结构12 1.14.1 对比操作13 1.14.2 抽象类，很少用 13 1.15 Trait 特质14 1.15.1 同时extends 类和Trait 时14 1.15.2 JVM 如何编译Trait14 1.16 高阶函数16 1.17 文件读写16 1.18 正则16 1.19 Scala 里正则类17 1.20 模式匹配17 1.21 Case 类 （样式类）17 1.22 泛型17 1.23 隐式转换19 1.1 打包部署 配置Scala 和Java 的环境变量。 确保Path 里能访问到scala、java、jar 命令。 编译一个类： scalac Test.scala // 由于我们是用Eclipse 自动编译，所以这个命令基本不用 scala Test //手工执行一个类 Scala 工程打包： cd bin jar -cvf a.jar ./ 运行a.jar： scala -cp a.jar com.cloudy.scala.lesson.Test 123 1.2 MAP 创建有固定值的Map： var m = Map(k1-v1,k2-v2) val m2 = Map((k1,v1),(k2,v2)) - 操作符用来创建键值对 无法put 新键值对进去。 常用的是创建Map 子类实例： val map = new HashMap[String,String](); map.put(12, v1) map(12) //获得该key 的value，相当于Java 里的map.get(“12”) map.getOrElse(12,”null”) map.get(“12”) //返回Option 对象。 Scala 的Option[T]是容器对于给定的类型的零个或一个元件。Option[T]可以是一些[T]或None 对象，它代表一个缺失值。例如，Scala 映射get 方法产生，如果给定的键没有在映射定义 的一些(值)，如果对应于给定键的值已经找到，或None。 比如： val a:Option[Int] = Some(5) val b:Option[Int] = None println(a.isEmpty: + a.isEmpty ) println(b.isEmpty: + b.isEmpty ) None 和null 的区别： None 的值为空，但有该 “对象”，b.isEmpty 返回true。 null 是无 “对象”， b.isEmpty 会报错java.lang.NullPointerException 1.3 TUPLE 元组 Map 是二维的，tuple 可以是多维的 （2 - 22 维） Tuple 是不同类型的元素的聚集 valt = (1, 1.0, “test”) t.getClass 最大Tuple22，即允许有22 列。 t._1 , t._2, t._3 分别引用每一列。 如： val str = t._3 感触最深的就是，希望一个函数可以返回多个值时，Java 里而不得不定义一个JavaBean （或 称作Vo、Po、POJO 类，该类中只有属性及其get 和set