Gateway集群可作为Hadoop等集群的一个独立的作业提交点,创建时必须关联到一个已经存在的集群,以便您更好的对关联集群进行操作。

Gateway集群一般是一个独立的集群,由多台相同配置的节点组成,集群上会部署 Hadoop(HDFS+YARN)、Hive、Spark和Sqoop等客户端。

未创建Gateway集群时,Hadoop等集群的作业是在本集群的Master或Core节点上进行提交的,会占用本集群的资源。创建Gateway集群后,您可通过Gateway集群来提交其关联的集群的作业,这样即不会占用关联集群的资源,也可提高关联集群Master或Core节点的稳定性,尤其是Master 节点。

每一个Gateway集群均支持独立的环境配置,例如,在多个部门共用一个集群的场景下,您可为这个集群创建多个Gateway集群,以满足不同部门的业务需求。