数据开发

数据同步

可以选择把数字工厂的主数据、基础模型以及工业应用提供的业务数据同步到数字工厂的数据中心中进行下一步的数据分析。

选择平台管理->数据开发->数据同步，首先可以选择哪些主数据需要同步到数据中心，单击是否同步的按钮，将把对应的主数据同步到数据中心中。

如果不再创建需要同步主数据，可以关闭数据同步。

选择平台管理->数据开发->数据同步，选择基础模型标签，可以选择把工厂模型、工艺路径和库存地点同步到数据中心，单击模型分类后的是否同步的按钮，将把对应的模型数据同步到数据中心中。

如果不再创建需要同步模型数据，可以关闭数据同步。

选择平台管理->数据开发->数据同步，选择经营业务数据标签，可以选择把哪种类型的业务数据同步到数据中心，单击业务数据分类后的是否同步的按钮，将把对应的业务数据同步到数据中心中。

如果不再创建需要同步经营业务数据，可以关闭数据同步。

数据查看

选择平台管理->数据开发->数据查看，能查看数据中心的数据库结构，帮助编写数据开发的作业。开启数据同步后会默认创建一个default数据库：

在default数据库节点下列出了所有的数据表，选择需要查看的数据表，将显示表的基本信息，包括表名、描述以及每一列的列名、类型以及列描述，下图是同步的物料主数据表结构：

可以通过数据预览功能可查看表中的数据记录：

自定义表

选择平台管理->数据开发->数据查看，能创建自定义的表结构：

在新建表窗口中输入表名、描述以及创建对应的表结构：

项目管理

选择平台管理->数据开发->项目管理，能管理数据开发项目，每个数字工厂将默认创建一个数字工厂数据分析示例项目，通过示例项目能够更好的理解数据开发的作业和工作流的使用。单击示例项目的项目开发操作，可以看到示例项目提供的作业和工作流。

数字工厂示例项目提供了四个SQL分析类型的作业示例：作业“主数据统计”统计不同状态的主数据的数量；作业“工厂模型”把同步到数据中心的工厂模型中的工厂、车间、产线、加工中心四级模型转换成一个能以工厂模型维度进行数据分析的维度视图；作业“产品合格率明细”把生产报工和质检结果数据进行统计，计算得到详细合格率结果；作业“质量合格率分析”实现了根据详细的合格率结果，统计工厂模型维度的质量合格率，数据分析的结果可以实现标准经营分析中成品率分析。

单击作业的编辑操作，可以看到每个作业的详细内容：

作业详情中可以看到作业名称、作业类型以及脚本编辑区和日志，单击编辑可以对作业基本属性进行编辑：可以对作业的名称、描述、预计最大运行时长、失败重试次数以及作业运行失败后的策略，进行编辑：在脚本编辑区，也能查看到具体的作业脚本，单击运行将提交作业并执行：

作业运行后，可以在日志框中查看到作业运行的最新日志以及运行后的结果，单击查看运行记录

作业运行的结果将产生新的结果页，可单击查看结果输出的内容：

在运行记录窗口中可以查看到所有作业和工作流的历史运行记录详情：

数字工厂示例项目中选择工作流，示例项目提供了两个工作流，工作流“主数据统计”执行作业“主数据统计”；工作流“质量分析”执行作业“工厂模型”、“产品合格率明细”和“质量合格率分析”，单击编辑查看质量分析工作流详情

工作流编辑页面包括了工作流名称、描述、当前调度状态、调度方式以及工作流内容，单击运行，可以提交工作流任务马上运行：

工作流运行后可以在日志中看到当前工作流中每个作业实例的运行情况，包括作业名称、类型、运行时间以及执行状态，可以单击详情，查看作业实例的运行详情：

在工作流的运行记录中，状态是运行中的工作流可以单击停止，终止本次工作流的运行；也可以单击暂停或者恢复来控制工作流运行：

可以单击新建项目，创建自己的数据开发项目：

输入数据开发项目的名称和描述：

项目确认添加后在项目列表中可以进行项目开发：

在新的项目中首先需要建立新的作业，单击新建作业，并输入作业名称和描述：

新建作业成功后，单击编辑对作业进行内容编辑：

如果作业需要输入参数，可以单击添加参数：来指定作业中引用参数的名称和值，在作业代码里通过引用${变量名}，然后在此处增加key为变量名，value为变量值的一行记录。例如：变量dy_date的值为当前日期前5天可以配置为${yyyy-MM-dd-5d}，参数的使用可以参看数字工厂示例项目中的作业“产品合格率明细”中bizdate参数使用。

参数配置完成后，就可以在编写作业脚本，数字工厂数据开发支持Spark SQL脚本，语法请查看Spark SQL。编写的脚本可以直接添加运行，查看运行日志进行调试。

如果选择是数据同步类型的作业，可以根据示例文件修改对应的数据源的配置：

注：如果被同步的源数据库有设置IP白名单的安全机制，需要把以下IP加入到白名单中：

创建好作业后，在项目中的工作流页签中单击新建工作流，填写工作流名称和描述：

新建工作流成功后，单击编辑对工作流进行内容编辑：

完成基本属性设置后，就可以在编辑工作流区域中设定作业的执行顺序和关系，每个工作流有一个开始节点和结束节点，在左边的作业节点列表中拖取要执行的节点到编辑区：

根据工作流功能设定节点之前的执行顺序：

设定好节点执行顺序后，可以单击运行和查看日志调试工作流。

数据集成

数据集成可以把数据开发工作流运行的结果通过开放数据源的方式提供给其他数据可视化工具（Quick BI和DataV数据大屏）使用，然后把数据可视化工具开发的分析功能集成到导航中分配给用户去使用。

查看数据源访问信息，数据可视化工具只要支持EMR数据源，就可以通过设置数据源的访问地址、数据库名称、端口以及用户名和密码进行数据库访问。

单击新增仪表盘：

输入Quick BI的仪表盘信息、pageID、AccessKey ID和AccessKey Secret（通过Quick BI的组织识别码获得）：

确认后将集成到导航设置中的经营驾驶舱模块下，并可以进行访问权限的设置。

如果集成DataV数据大屏，需要切换到数据大屏后单击新增数据大屏：

输入数据大屏的名称、链接和验证Token（通过DataV的DataV分享页Token参数签名校验获得）：