大数据工程师hadoop试题及解析.docxVIP

大数据工程师hadoop试题及解析

一、单项选择题（共10题，每题1分，共10分）

Hadoop生态系统中，负责集群资源全局管理与调度的组件是以下哪一项？

A.NameNode

B.ResourceManager

C.DataNode

D.ApplicationMaster

答案：B

解析：HDFS中NameNode负责元数据，DataNode负责数据存储；YARN的ResourceManager是全局资源管理组件，ApplicationMaster是单个应用的资源协调者，因此正确选项为B，A、C、D选项错误。

HDFS文件存储的最小单位是以下哪一项？

A.128MB

B.数据块（Block）

C.分区（Partition）

D.副本（Replication）

答案：B

解析：HDFS将文件拆分为固定大小的数据块（默认128MB）进行存储，数据块是HDFS存储的最小单位，分区是MapReduce中的概念，副本是数据冗余机制，因此正确选项为B，A是块的常见大小而非最小单位，C、D选项错误。

MapReduce的Shuffle阶段中，负责对Map输出数据进行分区的组件是以下哪一项？

A.Partitioner

B.Combiner

C.Sort

D.Merge

答案：A

解析：Shuffle阶段包括分区、排序、合并等步骤，Partitioner的作用是根据Map