创建E-MapReduce集群后,您可以在E-MapReduce数据开发中创建项目。数据开发是可编程,调度和监控的工作流平台,基于有向无环图(DAG),可以定义一组有依赖的作业,按照依赖依次执行。您可以通过控制台界面管控作业调度任务,并可以对各类作业运行状态进行监控,方便了工作流的管理和运维。

E-MapReduce数据开发的具体功能包括:
  • 数据开发项目管理,为项目关联集群资源、添加项目成员,详情请参见项目管理
  • 大数据作业开发和编辑,支持Hive,HiveSQL,MapReduce,Spark和Shell等作业类型的开发,详情请参见作业编辑
  • 工作流开发和调度,通过拖拽构建工作流,并设置时间调度策略和工作流之间依赖,详情请参见工作流编辑
  • 临时查询,Hive,SparkSQL,Spark和Shell查看任务执行结果,详情请参见临时查询
  • 运行记录,查看任务、工作流的运行记录和日志,可以对失败的作业和工作流重新运行,并可以查看项目成员在项目中的操作历史,详情请参见运维中心