数据工程师培训题库.pdfVIP

6 、当前用户提交了一个 wordcount 词频统计的任务， 最后任务执行失败， 可能的原因有 TDH数据平台认证工程师试题 哪些（ ） 姓名： _______________ 分数： ____________ A . 当前集群中没有足够的资源，不足以满足当前 wordcount 任务的需求 【说明】 B . 执行该任务的用户没有权限访问 HDFS上的数据文件 a) 客观题 30 题，每题 2 分，总计 60 分 C . 用户在执行任务之前在 HDFS相应的目录下创建了提交任务时指定的输出目录 b) 主观题 4 题，每题 10 分，总计 40 分 D . 以上原因都有可能 c) 满分 100 分。 7 、以下关于外表和托管表描述正确的是（ ） 【不定项选择题（每题 2 分共 60 分）】 A、外表的数据存储在本地，托管表的数据存储在 hdfs 上 1、下列与 HDFS有关的说法正确的是（ ） B、删除托管表只会删除 Inceptor 上的元数据不会删除数据文件，删除外表两者都 A．HDFS DataNode节点上的磁盘需要做 RAID1，用来保证数据的可靠性 会被删除 B．HDFS可以在磁盘之间通过 balance 操作，平衡磁盘之间的负载情况 C、删除外表只会删除 Inceptor 上的元数据不会删除数据文件，删除托管表两者都 C．HDFS建议 DataNode 之间的数据盘个数、容量大小不一致，以体现 HDFS的负载 会被删除 均衡能力 D、删除托管表或外表， incepotr 上的元数据和数据文件都会被删除 D．规划 HDFS集群时，建议 Active NameNode和 Standby NameNode分配在不同的机 架上 8 、SQL运行中如果出现 maptask 数据特别多，执行时间又很短时可以通过小文件合并来 2 、以下哪个服务作为 HDFS高可靠协调服务的共享存储？（ ） 进行优化，以下是合并参数有（ ） A. ZooKeeper A. SET = TRUE; B. JournalNodes B. SET = n; C. NameNode C. SET = m; D. ZKFailoverController D. SET = N; 3 、在集群中配置 HDFS的副本数为 3，设置数据块大小为 128M，此时我们上传一份 64M 9 、以下关于 inceptor 日志信息描述正确的有（ ） 的数据文件，该数据文件占用 HDFS空间大小为（ ） A. Inceptor server 日志存放于各节点的 /var/log/inceptorsql[x]/ A . 64M B. 可以通过 inceptor server 4040 查看 SQL错误日志 B . 128M C. Excutor 日志存放于 excutor 节点的 /var/log/inceptorsql[x]/ C . 384M 10、D． ExcutorGC 日志存放于 excutor 节点的 /var/log/inceptorsql[x]/ 有 10G的数 D . 192M 据， tableB 有 100G 的数据，两个表通过共有的 id 列做关联查询 name 列，以下方式可