2021年度新版数据工程师培训题库.docVIP

【阐明】客观 【阐明】 客观题30题，每题2分，总计60分 主观题4题，每题10分，总计40分 满分100分。 【不定项选取题（每题2分共60分）】 下列与HDFS关于说法对的是（ ） A．HDFS DataNode节点上磁盘需要做RAID1，用来保证数据可靠性 B．HDFS可以在磁盘之间通过balance操作，平衡磁盘之间负载状况 C．HDFS建议DataNode之间数据盘个数、容量大小不一致，以体现HDFS负载均衡能力 D．规划HDFS集群时，建议Active NameNode和Standby NameNode分派在不同机架上 如下哪个服务作为HDFS高可靠协调服务共享存储？（ ） ZooKeeper JournalNodes NameNode ZKFailoverController 在集群中配备HDFS副本数为3，设立数据块大小为128M，此时咱们上传一份64M数据文献，该数据文献占用HDFS空间大小为（ ） A . 64M B . 128M C . 384M D . 192M 在Yarn服务中，不包括如下哪种角色（ ） A . ResourceManager B . NodeManager C . ApplicationMaster D . Contianer ResourceManager是YARN重要构成某些，关于其功能描述不对的是（ ） A . 它直接将集群所拥有资源按需分派给运营在YARN上应用程序 B . 它负责将集群中所有资源进行统一管理和分派 C . 它接受各个节点资源报告信息 D . 它把资源按照方略分派给各应用 TDH数据平台认证工程师试题 姓名：_______________ 分数：____________ 当前顾客提交了一种wordcount词频记录任务，最后任务执行失败，也许因素有哪些（ 当前顾客提交了一种wordcount词频记录任务，最后任务执行失败，也许因素有哪些（ ） A . 当前集群中没有足够资源，局限性以满足当前wordcount任务需求 B . 执行该任务顾客没有权限访问HDFS上数据文献 C . 顾客在执行任务之前在HDFS相应目录下创立了提交任务时指定输出目录 D . 以上因素均有也许 如下关于外表和托管表描述对的是（ ） A、外表数据存储在本地，托管表数据存储在hdfs上 B、删除托管表只会删除Inceptor上元数据不会删除数据文献，删除外表两者都会被删除 C、删除外表只会删除Inceptor上元数据不会删除数据文献，删除托管表两者都会被删除 D、删除托管表或外表，incepotr上元数据和数据文献都会被删除 SQL运营中如果浮现maptask数据特别多，执行时间又很短时可以通过小文献合并来进行优化，如下是合并参数有（ ） SET ngmr.partition.automerge = TRUE; SET ngmr.partition.mergesize = n; SET ngmr.partition.mergesize.mb = m; SET mapred.reduce.tasks = N; 如下关于inceptor日记信息描述对的有（ ） Inceptor server日记存储于各节点/var/log/inceptorsql[x]/hive-server.log 可以通过inceptor server 4040查看SQL错误日记 Excutor日记存储于excutor节点/var/log/inceptorsql[x]/spark-excutor.log D． ExcutorGC日记存储于excutor节点/var/log/inceptorsql[x]/spark-excutor.gc.log tableA 有10G数据，tableB有100G数据，两个表通过共有id列做关联查询name列，如下方式可以优化计算效率是（ ） select /*+MAPJOIN(a)*/ a.name,b.name from tableA a join tableB b on a.id=b.id select /*+MAPJOIN(b)*/ a.name,b.name from tableA a join tableB b on a.id=b.id 建表时将tableA 和 tableB 依照id字段分相似数量桶 建表时将tableA 和 tableB 依照name字段分相似数量桶 如下属于HMaster功能是（ ） 为Region Server 分派region 存储数据元信息 对region进行compact操作 管理顾客对table增删改查操作 Hyperbase与Inceptor Hyper