Hadoop-动态刷新hdfs/yarn配置


在很多时候,修改了hadoop的配置后,希望立即生效,但是线上还有任务在执行,不能重启,可以执行以下命令让修改后的hdfs/yarn配置生效;

0、刷新yarn集群的队列

执行命令

${HADOOP_HOME}/bin/yarn rmadmin -refreshQueues 或 yarn rmadmin -refreshQueues
1、动态刷新hdfs配置

如果是HA集群则在两个namenode节点上执行

hdfs dfsadmin -fs hdfs://nn1:9000 -refreshSuperUserGroupsConfiguration
hdfs dfsadmin -fs hdfs://nn2:9000 -refreshSuperUserGroupsConfiguration
2、动态刷新yarn配置

如果是HA集群则在两个namenode节点上执行

yarn rmadmin -fs hdfs://nn1:9000 -refreshSuperUserGroupsConfiguration
yarn rmadmin -fs hdfs://nn2:9000 -refreshSuperUserGroupsConfiguration