HDFS异构存储原理.pptx

HDFS异构存储原理;1、掌握HDFS异构存储原理;1、异构存储是什么2、HDFS异构存储原理3、HDFS异构存储的使用4、HDFS异构存储的管理;所谓的异构存储就是将不同需求或者冷热的数据存储到不通的介质中去，实现既能兼顾性能又能兼顾成本。对于存储到HDFS的数据大致可以分下图的4个等级。 ;?对于HDFS异构存储的原理大致概括如下图所示： ; 1、在hdfs的配置文件hdfs-site.xml中配置对应的异构存储（后面配置部分有详细介绍） 2、DataNode启动的时候从配置文件中读取对应的存储类型，以及容量情况，并通过心跳的形式不断的上报给ＮameNode。 ; 3、NameNode收到DataNode发送的关于存储类型、容量等内容的心跳包后，会进行处理，更新存储的相关内容。 4、写请求发到NameNode后，NameNode根据写请求具体的目录对应的存储策略选择对应的存储类型的DataNode进行写入操作。 ; hdfs-site.xml配置：property?namedfs.datanode.data.dir/name?value/data01/block/,/data02/block/,/data03/block/,/data04/block/,[SSD]/data05/block//value? ? ? ? finaltrue/final/property;