大数据开发高频面试题及详细答案（实战版）.docx

大数据开发高频面试题及详细答案（实战版）

一、Hadoop核心基础面试题

1、简单说说Hadoop的核心组件以及各自作用？

Hadoop核心由三大组件构成，是分布式大数据处理的基础架构，各组件分工明确、相互配合：

第一是HDFS，分布式文件系统，主要负责海量数据的存储。它采用主从架构，NameNode作为主节点，维护整个文件系统的元数据，包括文件目录、文件对应块的存储位置、权限信息等，不存储真实数据；DataNode作为从节点，实际存储文件数据块，默认块大小128M，同时会定时向NameNode上报心跳和块状态，保证数据存活。SecondaryNameNode并非Na