5G通信大数据分析与应用 习题及参考答案汇总 第1--7章 .docx

1.大数据技术各国都加大了投入，具体表现有哪些？

参考答案：美国把大数据研究和生产计划提高到国家战略层面；英国在五年内投资1000万英镑建立世界上首个“开放数据研究所”；法国投入3亿欧元资金用于推动大数据领域的发展；日本公布了新IT战略——“创建最尖端IT国家宣言”；印度在数据开放方面效仿美国政府的做法，制定了一个一站式政府数据门户，把政府收集的所有非涉密数据集中起来等。

2.NHBigdata大数据平台的特点有哪些？

参考答案：1.多源数据的高效集成2.异构数据的海量存储3.场景丰富的计算框架4.海量数据的实时分析挖掘5.统一的平台化管理监控6.便捷易用的数据操作7.立体化的数据安全8.多样化的通信实训案例9.实时的案例结果数据可视化显示

3.大数据技术在通信领域目前已存在的典型的应用有哪些？

参考答案：大数据技术可对移动通信用户进行有效管理；对移动通信计费的高效管理；四合作变现；提升网络质量。

4.通讯大数据课程的特点？

参考答案：通信大数据这门课程将通过大数据技术融合云网的基础理论，覆盖网络的规划设计与网络部署、网络运维和运营、网络优化等多个维度锻炼和提升学生的数据分析、数据处理能力。

5.通信大数据产业的关注点有哪些？

参考答案：规范数据交易模式；积极树立数据应用成熟行业标杆；探索新的数据应用模式。

1、Hadoop发展至现在经历了几个大版本的更新，分别是什么？

参考答案：3个，hadoop1.0、hadoop2.0、hadoop3.0。

2、大数据组件中，提供数据存储的组件叫什么，主要包含了哪些实例（服务），实例的作用是什么？

参考答案：HadoopDistributedFileSystem，简称HDFS，是一个分布式文件系统。包含了NameNode和DataNode两个实例；NameNode存储文件的元数据，如文件名，文件目录结构，文件属性（生成时间、副本数、文件权限），以及每个文件的块列表和块所在的DataNode等；DataNode在本地文件系统存储文件块数据，以及存储数据块等。

3、YARN的作用是什么，主要包含什么实例（服务），什么作用？

参考答案：主要负责集群资源的协调管理；ResourceManager(RM)：负责整个集群资源（内存、CPU等）的管理；NodeManager(NM)：负责单个节点服务器资源的管理。

4、MapReduce架构用于计算的阶段是什么？

参考答案：分为Map、Reduce两个截断，Map过程将输入数据拆分成多个小块分别进行处理，Reduce过程主要负责汇聚结果值。

列举几项Hive的优缺点？

参考答案：优点：操作接口采用类SQL语法，提供快速开发的能力（简单、容易上手）；避免了去写MapReduce，减少开发人员的学习成本。Hive支持用户自定义函数，用户可以根据自己的需求来实现自己的函数。缺点：实现算法比较局限，迭代式算法无法表达；Hive调优比较困难，粒度较粗。

该章节介绍的计算法框架有哪些？哪个更优秀一些？

参考答案：Spark和MapReduce两种；Spark的计算更加优秀。

消息队列的组件是哪个？

参考答案：Kafka

Zookeeper的主要作用？

参考答案：ZooKeeper的主要作用是提供一种可靠的、分布式的协调服务，使得分布式系统中的各个节点能够协同工作，保持一致性，实现可靠的分布式应用。

问答：

简述sql中的插入数据操作语句。

inserintotable表名[(字段列表)]values（值列表);

查询字段非空的写法有哪些？

Isnotnull和’’

对表tables的字段sname进行模糊查询，查询出姓”张”的数据的写法？

Select*fromtablesWheresnamelike‘张%’；

对表tables的字段sname进行模糊查询，查询出姓”张”，名字是三个字的数据，的数据的写法？

Select*fromtablesWheresnamelike‘张__’；

列举去重查询的两种sql写法，表名tablename，对字段sname进行去重查询；

第一种：selectdistinctsnamefromtablename；

第二种：selectsnamefromtablenamegroupbysname；

查询工资总和大于9000的部门编号以及工资和，工资信息表表名emp，部门编号字段为deptno，工资信息字段sal？

selectdeptno,SUM(sal)FROMempGROUPBYdeptnoHAVINGSUM(sal)9000;

两个表关联产生笛卡尔积时，关联后的数据数据量跟两个表的关系？

当产生笛