废弃文件清理

本文为您介绍如何在DLF控制台使用Paimon的废弃文件清理功能,Catalog、数据库和数据表均支持废弃文件清理,以下操作以Catalog为例。

前提条件

使用存储优化功能前,需要先开通存储优化服务,并添加计算资源。详情请参见存储优化

启用废弃文件清理

  1. 登录数据湖构建控制台

  2. Catalog列表页面,单击Catalog名称。

  3. 单击存储优化页签,单击OrphanFileRemove策略旁的image按钮。

    再次单击image按钮,可停用废弃文件清理。

  4. 在弹出的对话框中,配置以下信息,单击确定

    • 废弃文件保留时间:必填,需要大于等于1,单位为天。

    • 选择计算资源

说明
  • Catalog下的数据库可以选择继承Catalog的策略,也可以独立配置策略。

  • 数据库下的数据表可以选择继承数据库的策略,也可以独立配置策略。

策略执行与调度

  1. Catalog列表页面,单击Catalog名称。

  2. 存储优化页签,单击立即执行,可以立即执行一次废弃文件清理。

  3. 也可单击调度配置,配置调度周期、调度时间、生效日期,周期性执行废弃文件清理。

执行历史展示

说明

只会展示当前Catalog、数据库和数据表的废弃文件清理执行历史。

  1. Catalog列表页面,单击Catalog名称。

  2. 存储优化页签,可以查看最新执行历史