Spark期末练习题库通关试卷提供答案解析【含答案详解】.docxVIP

Spark期末练习题库通关试卷提供答案解析【含答案详解】

1.使用spark-submit提交Spark应用时，用于指定Driver端内存大小的参数是？

A.--driver-memory2g

B.--executor-memory2g

C.--memory-fraction0.6

D.--driver-cores2

【答案】：A

解析：--driver-memory直接指定Driver端内存大小（如2g），A正确。--executor-memory指定Executor内存，B错误。--memory-fraction是内存管理的堆外内存比例（默认0.6），非内存大小，C错误。--driver-cores指定Driver的CPU核心数，D错误。

2.在Spark中，以下哪个操作会直接触发Job的提交和执行？

A.map()

B.count()

C.filter()

D.flatMap()

【答案】：B

解析：本题考察Spark中Transformation与Action的区别。A、C、D均为Transformation操作，仅定义数据转换逻辑，不触发Job执行；B选项count()是Action操作，用于统计RDD元素数量，会立即触发Job提交并执行计算。

3.SparkStreaming中的DStream（离散流）的本质是什么？

A.实时数据流直接