- 1
- 0
- 约9.47千字
- 约 8页
- 2026-09-05 发布于上海
- 举报
大数据工程师职业资格
一、单项选择题(共10题,每题1分,共10分)1.目前主流HDFS2.x稳定版本的默认数据块大小为以下哪个选项?A.32MBB.64MBC.128MBD.256MB答案:C解析:HDFS2.x及以上主流稳定版本的默认数据块大小为128MB,该配置平衡了NameNode元数据存储压力与MapReduce任务并行度。选项A是传统本地文件系统常用的块大小,不符合大数据分布式存储优化逻辑;选项B是HDFS1.x版本的默认块大小;选项D是部分针对超大文件场景的自定义配置值,不属于通用默认值。2.MapReduce计算流程中,Shuffle阶段的核心作用是以下哪一项?A.实现Map任务的分布式调度B.将Map阶段输出的相同key的数据分发到对应的Reduce节点C.完成最终计算结果的持久化存储D.实现计算节点的故障自动容错答案:B解析:Shuffle是MapReduce的核心连接环节,核心作用是完成Map输出数据的分区、排序、合并,将相同key的数据路由到对应Reduce节点做聚合计算。选项A是YARN资源调度模块的职责;选项C是Reduce阶段完成后的输出环节职责;选项D是Hadoop框架的分布式容错机制职责。3.Spark生态中,代表分布式只读、可并行计算的核心数据抽象是以下哪一项?A.DataFrame
您可能关注的文档
最近下载
- (高清版)DB11∕T 1230-2015 射击场设置与安全要求.pdf VIP
- 第6课 欧洲的思想解放运动(课件).pptx VIP
- 2026历年高考英语真题高频词汇必备800个(打印版).pdf
- 煤矿隐蔽致灾因素普查规范解读课件.pptx VIP
- 02R112 拱顶油罐图集(OCR).pdf VIP
- (正式版)DB11∕T 1230-2015 《射击场设置与安全要求》.docx VIP
- 生物医用材料课件.ppt VIP
- 第3章 位置与坐标压轴题专练八年级数学上册北师大版.docx VIP
- 中山鸣扬年产铝合金60万件、树脂桶2.4万个、过滤器2.4万个、家电螺丝1000万个新建项目环境影响报告表.pdf VIP
- 广东省中学生入团积极分子、发展对象培养考察表.pdf VIP
原创力文档

文档评论(0)