HDFS异构存储类型;1、掌握HDFS异构存储类型和存储策略;1、存储类型2、datanode角色的配置3、存储策略4、存储策略相关的命令和操作;
存储类型表示数据节点支持的多种物理存储介质的类型,有如下几类:?* RAM_DISK(transient)?* SSD?* DISK(default)?* ARCHIVE;
ARCHIVE
ARCHIVE,官方文档的说法是“which has high storage density (petabyte of storage) but little compute power, is added for supporting archival storage”,我个人的理解是ARCHIVE并不特指某种存储介质,只要是满足高密度存储的都可以,比如位于低性能大存储服务器上的磁盘(见过一种方案,DISK用小容量SAS盘,ARCHIVE用大容量SATA盘)。 ;
通过datanode角色的配置项dfs.datanode.data.dir可以配置存储介质的位置和类型,比如:
property namedfs.datanode.data.dir/name value[RAM_DISK]file:///ram_disk,[SSD]file:///ssd1/dn,[DISK]file:///disk1/dn,[ARCHIVE
您可能关注的文档
- Hadoop集群构建流程.pptx
- Hadoop集群环境中的重要角色.pptx
- Hadoop集群网络拓扑“衡水杯”一等奖.pptx
- Hadoop集群网络拓扑省赛获奖.pptx
- Hadoop集群网络拓扑.pptx
- Hadoop集群部署配置.pptx
- 二零二三年 优质公开课Hadoop验证.pptx
- 二零二三年 优质公开课Hadoop验证准备.pptx
- 二零二三年 优质公开课haproxy.pptx
- HarryWinston海瑞温斯顿—HighJewelry黄钻珠宝.pptx
- 电子元器件 半导体器件长期贮存 第4部分:贮存 标准立项发展报告.docx
- 电子用增材制造和三维打印工艺的分类 标准立项发展报告.docx
- 电子电气产品中特定物质的测定 第3-1部分:X射线荧光光谱法筛选铅、汞、镉等有害物质含量 标准立项发展报告.docx
- JBT 15030-2025 裸眼立体影像光场微透镜标准立项发展报告.docx
- 电网设备卫星巡检数据处理技术规范 标准立项发展报告.docx
- 电器和电子断路器 第2部分:通用标准 标准立项发展报告.docx
- 电压监测仪使用技术条件 标准立项发展报告.docx
- 电气绝缘液体与结构材料相容性试验方法 标准立项发展报告.docx
- 电阻器和电容器引出线的优选直径 标准立项发展报告.docx
- 电子和通信设备用变压器和电感器测试方法和试验程序 标准立项发展报告.docx
原创力文档

文档评论(0)