二零二三年 优质公开课HDFS存储扩容.pptx

HDFS存储扩容;1、了解如何修改副本数 2、掌握hdfs如何进行存储扩容;1、修改副本数 2、修改data目录的位置 3、存储扩容 ;在CM的HDFS配置中找到dfs.replication项,修改为2,重启HDFS。 但这样只能保证新写入的块副本数变为2,原有块仍然是3副本,因此还需要执行命令hdfs dfs -setrep 2 -R -w /dw。其中/dw是指定的路径,-R参数则表示包含子目录。 通过执行hdfs fsck /dw命令,观察“Average block replication”一项,可以看出副本调整的过程是否已经完成。;hadoop dfsadmin -report查看所有节点的空间占用情况 在core-site.xml中 hadoop.tmp.dir 为新目录如 /mnt/sdbmount/data/tmp 在hdfs-site.xml中 dfs.name.dir ?为新目录如 /mnt/sdbmount/data/hdfs/dfsname dfs.data.dir ?为新目录如 /mnt/sdbmount/data/hdfs/dfsdata,多个目录用都好分隔。 ; 1、创建ext4文件系统 执行:mkfs -t ext4 /dev/sdb。如果没有创建文件系统,mount时会报错:Unknown filesystem type (null)。 因为

文档评论(0)

1亿VIP精品文档

相关文档