当E-MapReduce(简称EMR)集群的节点存在异常,或集群缩容下线节点时,需要在EMR集群管理页面对HDFS DataNode、YARN NodeManager、Jindo Storage Service和HBase HRegionServer服务进行下线(Decommission)操作,如果通过其他方式直接下线节点,可能会导致任务调度失败以及数据安全的问题。本文为您介绍如何进行节点下线操作。
前提条件
已在EMR上创建集群,详情请参见创建集群。
使用限制
当EMR集群的节点存在异常,或集群缩容下线节点时,且您待下线的节点存在HDFS DataNode、YARN NodeManager、Jindo Storage Service或HBase HRegionServer服务,您需要进行节点下线操作。
操作步骤
注意 EMR目前支持对HDFS DataNode、YARN NodeManager、Jindo Storage Service和HBase HRegionServer服务进行节点下线操作,如果您待下线的节点存在这些服务,则请按照以下顺序进行下线操作。
- 进入集群管理页面。
- 登录阿里云E-MapReduce控制台。
- 在顶部菜单栏处,根据实际情况选择地域和资源组。
- 单击上方的集群管理页签。
- 在集群管理页面,单击目标集群的集群ID。
- 下线HDFS DataNode。
- 停止YARN NodeManager。
- 下线Jindo Storage Service。
- 下线HBase HRegionServer。