hadoop官方文档学习笔记（1）——resourcemanagerHA

resource manager HA是hadoop自从2.4之后推出的功能，以Active/Standby的方式提供冗余，目的是为了消除单点失败的风险。

创新互联建站是一家专业提供济南企业网站建设,专注与成都做网站、网站设计、H5建站、小程序制作等业务。10年已为济南众多企业、政府机构等服务。创新互联专业网站制作公司优惠进行中。

1、总体架构：

2、故障切换：有自动和手动两种形式。

手动：如果以手动形式切换，使用yarn haadmin命令首先将Active节点转为standby，再将standby节点转为active。

自动：RM有基于zookeeper的节点选举机制决定哪一个是活动节点。不需要像HDFS一样部署一个zkfc守护进程，因为RM内嵌了这样的功能。

做了rm的HA之后，所有节点和客户端都要列出所有RM节点，连接时会用轮询的方式遍历，直到找到一个active的节点。如果活动节点down了，它们会继续轮询。这一动作被实现为org.apache.hadoop.yarn.client.ConfiguredRMFailoverProxyProvider类。可以通过重新实现该类，并在yarn.client.failover-proxy-provider 配置项中指定新的类名来改写这一行为逻辑。

3、配置

4、示例（最小配置）

 yarn.resourcemanager.ha.enabled
 true


 yarn.resourcemanager.cluster-id
 cluster1


 yarn.resourcemanager.ha.rm-ids
 rm1,rm2


 yarn.resourcemanager.hostname.rm1
 master1


 yarn.resourcemanager.hostname.rm2
 master2


 yarn.resourcemanager.webapp.address.rm1
 master1:8088


 yarn.resourcemanager.webapp.address.rm2
 master2:8088


 yarn.resourcemanager.zk-address
 zk1:2181,zk2:2181,zk3:2181

5、管理命令

查看节点状态：
$ yarn rmadmin -getServiceState rm1
active

$ yarn rmadmin -getServiceState rm2
standby

故障切换：

 $ yarn rmadmin -transitionToStandby rm1
$ yarn rmadmin -transitionToActive rm2

注意：
 开启自动故障切换后，系统为防止造成脑裂或其它不一致的状态，会拒绝人为管理HA状态。如果非常清楚自己的行为，可以在切换命令中指定-forcemanual选项。