集群脚本

前提条件

• 请确保集群状态是空闲或运行中，其他状态时集群不支持运行集群脚本。
• 开发或从其他处获取集群脚本（集群脚本示例），并上传到OSS。

集群脚本的作用

集群脚本适用于长期存在的集群，对按需创建的临时集群，应使用引导操作来完成集群初始化工作。集群脚本类似引导操作，在集群创建完成后，您可通过集群脚本功能来安装很多目前集群尚未支持的软件，例如：

• 使用yum安装已经提供的软件。
• 直接下载公网上的一些公开的软件。
• 读取OSS中您的自有数据。
• 安装并运行一个服务（例如，Flink或者Impala），但需要编写的脚本会复杂些。

集群脚本的使用

一个集群同一时间只能运行一个集群脚本，如果有正在运行的集群脚本，则无法再提交执行新的集群脚本。每个集群最多保留10个集群脚本记录，如果超过10个，则您需要将之前的记录删除才能创建新的集群脚本。

集群脚本可能在部分节点上运行成功，部分节点上运行失败，例如节点重启导致脚本运行失败。在解决异常问题后，您可单独指定失败的节点再次运行。当集群扩容后，您也可指定扩容的节点单独运行集群脚本。

集群脚本会在您指定的节点上下载OSS上的脚本并运行，并根据返回值是否为0来判断执行是否成功。如果运行状态是失败，则您可登录到各个节点上查看运行日志，运行日志存储在每个节点的/var/log/cluster-scripts/clusterScriptId目录下。如果集群配置了OSS日志目录，运行日志也会上传到osslogpath/clusterId/ip/cluster-scripts/clusterScriptId目录。

1. 登录阿里云E-MapReduce控制台。
2. 单击上方的集群管理。
3. 在集群管理页面的集群列表中，单击集群后面的详情。
4. 在集群详情页面左侧的导航栏中，单击集群脚本。
5. 在集群脚本页面，单击右上角创建并执行。
6. 在弹出的创建脚本对话框中，输入名称，选择脚本，选中执行节点（可多选）。
   说明 在使用集群脚本功能时，强烈建议您先在单个节点对集群脚本进行测试，在测试全部正常后，再在整个集群上操作。
7. 完成上述参数配置后，单击确定。

   集群脚本创建完成后，会显示在集群脚本列表中，并且脚本处于运行中状态。单击刷新，可更新集群脚本的状态。

8. 单击详情，可查看脚本在各个节点上的运行情况。

   单击刷新，可更新脚本在各个节点上的运行状态。

集群脚本示例

#!/bin/bash
osscmd --id=<yourid> --key=<yourkey> --host=oss-cn-hangzhou-internal.aliyuncs.com get oss://<yourbucket>/<myfile>.tar.gz ./<myfile>.tar.gz
mkdir -p /<yourdir>
tar -zxvf <myfile>.tar.gz -C /<yourdir>

#!/bin/bash
yum install -y ld-linux.so.2

集群默认使用root账户来执行您指定的脚本，您可以在脚本中使用su hadoop切换到hadoop账户。