CDH中HDFS、Yarn开启HA


环境说明:CDH5.16.2 集群新搭建完成;

接下来准备开启HDFS、Yarn的HA;


一、HDFS开启HA

1、进入hdfs组件,在“操作”中启用HA

HDFS的HA是指NameNode的高可用


2、输入Nameservice名称

如果公司有多个集群,Nameservice名称不要设置重复了,

Nameservice用来标识由2个NameNode组成的单个HDFS实例;


3、设置新Namenode和JournalNode角色运行的主机

此时已经有一台NameNode,需要再选一台主机运行NameNode

JournalNode一般是3个节点


4、设置NameNode和JournalNode的数据目录

这里应该可以先创建一个NameNode的主机模板,写多个目录,来做数据目录冗余


5、随后等待集群服务自动重启


下面这个因为原先的NameNode的目录已经存在了,不为空,所以告警了,但是不影响,可以继续操作


6、HA开启完成


查看:


二、Yarn开启HA

Yarn中的HA是指ResourceManager的高可用

1、在yarn组件的“操作”中开启HA


2、选择运行备用ResourceManager的主机


3、等待开启完成,此过程会重启yarn



查看:

cdh