CDH(Hadoop)集群磁盘扩容

本文介绍如何在Linux环境下将本地磁盘挂载到HDFS数据目录,并通过Cloudera Manager进行配置,包括创建目录、设置权限、更新配置及测试验证等步骤。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1.在Linux本地挂在磁盘

(目前网络部在Linux本地上挂载磁盘,此过程大数据平台这边还没测通,后期测通补上此步骤操作。)

2.在磁盘挂载目录下创建文件夹“/dfs/dn”

mkdir -p /media/New/dfs/dn

173148_jcc2_3197158.png 

3.对目录进行赋权限

chown -R hdfs:hadoop /media/New/dfs/dn

173204_jawH_3197158.png 

4.悬挂新磁盘到hdfs数据目录下

第一:在cloudera manager主页面上点击HDFS

173222_niuJ_3197158.png 

第二:选择配置

173241_oZ2h_3197158.png

第三:选择DataNode----->+----本地挂在磁盘的数据目录放到新框中”/media/New/dfs/dn”

173300_fr1i_3197158.png 

第四:点击保存更改

173315_SA1N_3197158.png

第五:重启集群,使挂载的磁盘生效,注意集群重启过程中一定不要中止。

173343_VosN_3197158.png 

第六:测试新挂磁盘是否被HDFS识别使用

向hdfs写一部分数据,然后在Linux本地使用“df -lh”,查看悬挂的磁盘使用量是否有变化,如果被使用指标在增加,说明磁盘已经被hdfs识别并使用。

转载于:https://my.oschina.net/u/3197158/blog/1523664

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值