本文介绍通过应用集成实现文件备份。完成从SFTP服务器获取新的订单文件，然后上传到OSS存储空间进行备份。

前提条件

背景信息

通过集成流配置可以从SFTP服务器下载目标文件，实现将文件备份到OSS存储空间。

本文创建的集成将实现以下功能：
  1. 从SFTP服务器的incoming目录下载目标文件data.tsv。
  2. 将文件data.tsv上传到OSS的存储空间进行备份。

创建连接

本示例中会用到SFTP和OSS服务，所以需要借助连接器创建对应的连接。

创建空白集成

  1. 登录应用集成控制台。
  2. 在顶部菜单栏，选择地域。
  3. 在左侧导航栏，选择集成 > 集成列表。
  4. 在集成列表页面，选择目标工作空间，然后单击新建集成。
  5. 在新建集成面板，选择创建方式为空白流，选择目标环境，输入集成名称，然后单击创建。
  6. 集成创建后，进入集成设计页面，选择接下来的操作。
    • 在右上角单击保存，创建一个空集成。
    • 在页面左上角单击图标，在列表中单击Flow，创建集成流。

创建集成流

  1. 在集成设计页面左上角，单击图标，在列表中单击Flow，创建集成流。
    也可以在页面中，选择点击创建 > Flow，创建集成流。
  2. 选择触发器，实现从SFTP服务器下载目标文件。
    1. 在创建新集成流对话框，输入名称，选择SFTP作为触发器，然后单击创建。
      创建新集成流-SFTP触发器
    2. 在选择操作对话框，单击Download右侧的选择。
      选择operation
    3. 在步骤配置对话框，设置SFTP下载参数，然后单击确定。
      步骤配置-从SFTP下载文件
      从SFTP服务器下载文件的参数说明如下。
      参数 描述 是否必须
      下一次轮询之前的毫秒 轮询时间间隔。 否
      是否下载后删除文件 是否下载后从服务器删除文件。 否
      文件名正则匹配 文件名的匹配规则，需满足正则表达式。 否
      文件名 需要下载的文件名称，本场景设置为data.tsv。
      说明 建议限制文件名。如果不配置，则会递归到全部目录，有可能导致集成执行失败。
      		否
      是否递归扫描目录 是否扫描子目录下的文件。 否
      是否验证幂等性（避免重复消费） 在一定范围内验证文件是否被消费过，消费过的文件不会再次被消费。

      应用集成控制台会建立一个文件绝对路径+文件修改时间的集合，总共可存1000条数据，数据变更符合队列规则（LRU）。

      当文件绝对路径和文件修改时间都相同，且记录的数据在数据限制范围内，即代表文件已经被消费过，不会再次被消费。

      		否
      轮询开始前的毫秒数 开始轮询之前等待的时间。 否
      SFTP目录 要下载文件的SFTP目录名，本场景设置为incoming。 是
    4. 在设置outputDataShape对话框，在选择schema列表中选择任意类型，然后单击创建。
    创建完成后，集成流即包含了从SFTP服务器下载文件的触发器。SFTP-触发器结果
  3. 在集成流中添加OSS连接，实现文件备份。
    1. 在集成流中Download后，单击图标。
    2. 在选择组件类型对话框，单击连接，然后单击OSS连接。
    3. 在选择操作对话框，单击Put File右侧的选择。
      选择operation
    4. 在步骤配置对话框，设置相对路径为根目录/，然后单击确定。
    5. 在设置inputDataShape对话框，在选择schema列表中选择任意类型，然后单击创建。
  4. 在集成设计页面右上角，单击保存，保存集成流。
    实现文件备份功能的集成流创建完成。文件备份集成流创建完成
    注意 返回集成设计页面时，请及时在页面右上角单击保存，以免添加的步骤丢失。

部署集成

集成创建并保存后，需要对集成进行部署。具体操作，请参见部署集成示例。

结果验证

  • 查看OSS存储文件。

    登录OSS，查看根目录下是否存在data.tsv文件。

  • 验证集成部署是否正常运行。

    查看目标集成的执行记录，其执行日志的状态是否为SUCCESS。