HDFS与HBASE的动态节点的扩容(增删)小白级(二)

本文详细介绍了如何在HDFS和HBASE中动态增加或删除节点,包括HDFS中添加slave3节点的步骤,以及删除slave2节点的过程。同时,文章也阐述了HBASE中节点的动态增删,强调了HBASE操作的简便性,并提到了使用hbaseshell进行负载均衡。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >


上一篇文章,介绍了动态扩容前的基础配置。

本文将讲述HDFS和HBASE动态增删的具体内容。

一、HDFS动态增节点---slave3

 开始之前要保证其他节点开启Hadoop集群,毕竟是动态的嘛

  1.安装Hadoop  (slave3)

     把其他节点上的hadoop发送到slave3节点上

scp -r /usr/hadoop root@slave3:/usr/
 2.修改slaves文件(所有节点)

#加入slave3
 
vi  $HADOOP_HOME/etc/hadoop/slaves
slave1
slave2
slave3
3.启动节点  slave3

$HADOOP_HOME/sbin/hadoop-daemon.sh start datanode
$HADOOP_HOME/sbin/yarn-daemon.sh start nodemanager
4.查看状态  master

hdfs dfsadmin -refreshNodes
  hdfs dfsadmin -report
效果图:

也可以通过web端进行查看:

 二、HDFS动态删节点----slave2

在所有的节点上   

1.修改hdfs-site.xml文件

cd /usr/hadoop/hadoop-2.7.3/etc/hadoop/
vi hdfs-site.xml
 
 
<!--不加入集群的节点列表--> 
<property>
<name>dfs.hosts.exclude</name>
<value>/usr/hadoop/hadoop-2.7.3/etc/hadoop/excludes</value>
</property>
2.创建excludes文件,加入slave2

touch excludes 
 
vi /usr/hadoop/hadoop-2.7.3/etc/hadoop/excludes
slave2
3.关闭节点进程  

在slave2上

sbin/hadoop-daemon.sh stop datanode
sbin/yarn-daemon.sh stop nodemanage
4.查看状态   

在master上

hdfs dfsadmin -refreshNodes    
hdfs dfsadmin -report
效果图:

 也可以通过web端进行查看:

 图中slave2的状态显示Decommission in Progress,表示slave2退出了集群

三、HBASE动态增删---slave3

HBASE的动态增删要比HDFS的简单一些。当然,要先保证其他节点的HBASE是开启的。

1.安装hbase    在slave3上

把其他节点上的hbase发送到slave3节点上

scp -r /usr/hbase root@slave3:/usr/
2. 修改regionserver文件(所有节点)

#在hbase的conf路径下
vi regionserver
   slave1
   slave2
   slave3
3.开启节点    (在slave3上)

#在bin目录下
   ./hbase-daemon.sh start regionserver
 之后可以进入hbase shell 通过status 查看状态
在新的节点上进入hbase shell
然后输入balance_switch true
过一会,你就会发现regions 已经负载均衡了。
同理要删除slave3节点则需要在slave3上运行

#bin目录下
./hbase-daemon.sh stop regionserver
或者
graceful_stop.sh regionser(主机名)
之后可以进入hbase shell 通过status 查看状态
当然,也可以通过hbase web来进行查看状态,在这里就不再详细展示了。

至此,HDFS与HBASE的动态增删节点就讲完了,希望能对大家有所帮助。感谢大家的支持。
 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值