大数据开发 笔试题.docxVIP

大数据开发笔试题

考试时间：______分钟总分：______分姓名：______

一、选择题（每题2分，共20分）

1.下列哪个不是Hadoop的核心组件？

A.HDFS

B.MapReduce

C.YARN

D.Hive

E.ZooKeeper

2.在HDFS中，DataNode负责存储数据块，它会定期向NameNode报告自己的状态和存储的块信息，这种通信机制称为？

A.Heartbeat

B.BlockReport

C.Leases

D.JournalNodes

E.NameNodeHA

3.MapReduce模型中，Map阶段的输出键值对（key1,value1）在经过Shuffle和Sort后，会成为Reduce阶段的输入。关于Shuffle过程，下列描述错误的是？

A.Map任务输出的中间结果会被存储在本地磁盘上。

B.Shuffle过程会确保相同键的所有值都被发送到同一个Reduce任务。

C.Shuffle过程主要由Map任务的后端和Reduce任务的前端协作完成。

D.Shuffle阶段会发生键的排序和值的聚合。

E.Shuffle是MapReduce任务性能的关键瓶颈之一。