数据工程师培训题库(四).docxVIP

. . 整理文档 整理文档 哪些（ ）6、当前用户提交T了一D个H数word据cou平nt 词台频统认计的证任务工， 程最后师任务试执行题 哪些（ ） 姓名： 分数： A . 姓名： 分数： 【说明】 B . 执行该任务的用户没有权限访问 HDFS上的数据文件 客C观. 题 30 题，每题 2 分，总计 60 分 用户在执行任务之前在 HDFS相应的目录下创建了提交任务时指定的输出目录 主观题 4 题，每题 10 分，总计 40 分 D . 以上原因都有可能 满分 100 分。 7、以下关于外表和托管表描述正确的是（ ） 【不定项选择题（每题 2 分共 60 分）】 1、下B列与 HDFS 1、下B列与 HDFS有关的说法正确的是（ ） 、删除托管表只会删除 Inceptor 上的元数据不会删除数据文件， 删除外表两者都会被删除A． HDFS DataNode 节点上的磁盘需要做 RAID1，用来保证数据的可靠性 B． HDFS可以在磁盘之间通过 balance 操作，平衡磁盘之间的负载情况 C、删除外表只会删除 Inceptor 上的元数据不会删除数据文件， 删除托管表两者都会 被删除C．HDFS建议 DataNode 之间的数据盘个数、容量大小不一致，以体现 HDFS的负载 被删除 均衡能力 D、删除托管表或外表， incepotr 上的元数据和数据文件都会被删除 D．规划 HDFS集群时，建议 Active NameNode 和 Standby NameNode 分配在不同的 机架上 8、SQL运行中如果出现 maptask 数据特别多，执行时间又很短时可以通过小文件合并来 2进、行以优下化哪，个以服下务是作合为并参H数D有FS（高可靠协调）服务的共享存储？（ ） A. ZooKeeper SET ngmr.partition.automerge = TRUE; JournalNodes SET ngmr.partition.mergesize = n; NSEamT enNgmodre.partition.mergesize.mb = m; ZSKEFTamiloavpererCdo.rnetdroulcl e.tasks = N; 3、在集群中配置 HDFS的副本数为 3，设置数据块大小为 128M ，此时我们上传一份 64M 9、以下关于 inceptor 日志信息描述正确的有（ ） 的数据文件，该数据文件占用 HDFS空间大小为（ ） Inceptor server 日志存放于各节点的 /var/log/inceptorsql[x]/hive-server.log A . 64M 可以通过 inceptor server 4040 查看 SQL错误日志 B . 128M CD . 384MExcutor 日志存放于 CD . 384M ． ExcutorGC日志存放于 excutor 节点的 /var/log/inceptorsql[x]/spark-excutor.gc.log D . 192M 10、tableA 有 10G 的数据， tableB 有 100G 的数据，两个表通过共有的 id 列做关联查询 服务中，不包含以下哪种角色（ ）4na、m在 服务中，不包含以下哪种角色（ ） Yarn 列，以下方式可以优化计算效率的是（ ） A.. Resseoleucrtce/*M+ManAaPgJeOr IN(a)*/ a.name,b.name from tableA a join tableB b on a.id=b.id B . NodeManager select /*+MAPJOIN(b)*/ a.name,b.name from tableA a join tableB b on a.id=b.id C . ApplicationMaster 建表时将 tableA 和 tableB 根据 id 字段分相同数量的桶 D . Contianer 建表时将 tableA 和 tableB 根据 name 字段分相同数量的桶 5、ResourceManager 是 YARN的主要组成部分，有关其功能描述不正确的是（ ） 11、以下属于 HMaster 功能的是（ ） ． 为 Region Server 分 配 regionAA . 它直接将集群所拥有的资源按需分配给运行在 ． 为 Region Server 分 配 region B . 它负责将集群中的所有资源进行统一管理和分配 存储数据元信息 C . 它接受各个节点的资源汇报信息 管理用户对 table 的增删改查操作它把资源按照策略分配给各应用对 region 管理用户对 table 的增删改查操作 它把资源