2021年度hadoop常见笔试题答案.docVIP

Hadoop测试题 一．填空题，1分（41空），2分（42空）共125分 (每空1分) datanode 负责HDFS数据存储。 (每空1分)HDFS中block默认保存 3 份。 (每空1分) ResourceManager 程序普通与 NameNode 在一种节点启动。 (每空1分)hadoop运营模式有： 单机模式 、 伪分布模式 、 完全分布式 。 (每空1分)Hadoop集群搭建中惯用4个配备文献为： core-site.xml 、hdfs-site.xml 、 mapred-site.xml 、yarn-site.xml 。 (每空2分)HDFS将要存储大文献进行 分割 ， 分割 后存储在既定存储块 中，并通过预先设定优化解决，模式对存储数据进行预解决，从而解决了大文献储存与计算需求。 (每空2分)一种HDFS集群涉及两大某些，即 namenode 与 datanode 。普通来说，一种集群中会有一种 namenode 和各种 datanode 共同工作。 (每空2分) namenode 是集群主服务器，重要是用于对HDFS中所有文献及内容数据进行维护，并不断读取记录集群中 datanode 主机状况与工作状态，并通过读取与写入镜像日记文献方式进行存储。 (每空2分) datanode 在HDFS集群中担任任务详细执行角色，是集群工作节点。文献被提成若干个相似大小数据块，分别存储在若干个 datanode 上， datanode 会定期向集群内 namenode 发送自己运营状态与存储内容，并依照 namnode 发送指令进行工作。 (每空2分) namenode 负责接受客户端发送过来信息，然后将文献存储位置信息发送给 client ，由 client 直接与 datanode 进行联系，从而进行某些文献运算与操作。 (每空1分) block 是HDFS基本存储单元，默认大小是 128M 。 (每空1分)HDFS还可以对已经存储Block进行多副本备份，将每个Block至少复制到 3 个互相独立硬件上，这样可以迅速恢复损坏数据。 (每空2分)当客户端读取操作发生错误时候，客户端会向 namenode 报告错误，并祈求 namenode 排除错误 datanode 后，重新依照距离排序，从而获得一种新 读取途径。如果所有 datanode 都报告读取失败，那么整个任务就读取失败。 (每空2分)对于写出操作过程中浮现问题， FSDataOutputStream 并不会及时关闭。客户端向Namenode报告错误信息，并直接向提供备份 datanode 中写入数据。备份 datanode 被升级为首选 datanode ，并在别的2个 datanode 中备份复制数据。NameNode对错误DataNode进行标记以便后续对其进行解决。 (每空1分)格式化HDFS系统命令为： hdfs namenode –format 。 (每空1分)启动hdfsshell脚本为： start-dfs.sh 。 (每空1分)启动yarnshell脚本为： start-yarn.sh 。 (每空1分)停止hdfsshell脚本为： stop-dfs.sh 。 (每空1分)hadoop创立多级目录（如：/a/b/c）命令为： hadoop fs –mkdir –p /a/b/c 。 (每空1分)hadoop显示根目录命令为： hadoop fs –lsr 。 (每空1分)hadoop包括四大模块分别是： Hadoop common 、HDFS 、Mapreduce 、yarn 。 (每空1分)namenode默认WebUI访问端标语为： 50070 。 (每空1分)ResourceManager默认WebUI访问端标语为： 8088 。 (每空1分)historyServer默认WebUI访问端标语为： 19888 。 (每空1分)修改blocksize大小属性是： dfs.blocksize ，在 hdfs-site.xml 配备文献里。 (每空1分)HDFS中namenodeRPC端标语为： 8021 ，其作用是： 接受Client连接RPC端口，用于获取文献系统metadata信息 。 (每空2分)Mapper类中有 4 个函数。 (每空1分)默认NameNode周期性从DataNode接受心跳信号时间间隔为： 3s 。 (每空1分)hadoo