大数据分析师Spark题库及答案.docxVIP

大数据分析师Spark题库及答案

一、单项选择题（共10题，每题1分，共10分）

Spark框架的核心基础模块是以下哪一项？

A.Hadoop分布式文件系统

B.SparkCore

C.YARN资源调度框架

D.MapReduce计算模型

答案：B

解析：SparkCore是整个Spark框架的核心基础模块，负责提供RDD、任务调度、资源管理等核心功能，是SparkSQL、SparkStreaming等其他组件的依赖基础；选项A是Hadoop的存储组件，不属于Spark；选项C是通用资源调度框架，可支持Spark但不是Spark自身核心；选项D是传统大数据计算模型，与Spark核心无关。

下列属于SparkAction算子的是哪一项？

A.map

B.filter

C.count

D.flatMap

答案：C

解析：Action算子会触发Spark作业的实际计算，并返回非RDD类型的结果，count算子用于统计RDD中元素的数量，属于典型Action算子；选项A、B、D均为Transformation算子，这类算子是懒执行的，仅定义数据转换规则，不会触发实际计算。

Spark任务调度中，stage划分的依据是以下哪一种依赖？

A.窄依赖

B.宽依赖

C.血缘依赖

D.分区依赖

答案：B

解析：Spark根据宽依赖划分任务stage，宽依赖会导致数据