无锁数据变更

当业务累积了大量数据时,需要对在线数据与历史数据进行分隔管理,或定期清除表中数据。DMS的无锁数据变更功能将结合表中的主键或非空唯一键,分批对表中的目标数据进行操作,在保证执行效率的同时,尽可能地减小了对数据库性能、空间的影响。

注意事项

无锁数据变更仅支持单表、简单的SQL操作(例如SELECT、UPDATE、DELETE等),不支持多表操作(例如DELETE语句中包含JOIN)。

操作步骤

本示例通过无锁数据变更功能将big_table表中的long_text_b字段的数据批量改为random long text

  1. 普通用户提交工单。

    1. 以普通用户账号登录数据管理DMS 5.0

    2. 在页面顶部,选择数据库开发 > 数据变更 > 无锁变更

      说明

      若您使用的是极简模式的控制台,请单击控制台左上角的2023-01-28_15-57-17.png图标,选择全部功能 > 数据库开发 > 数据变更 > 无锁变更

    3. 配置相关信息,并单击提交申请

      其中部分参数的说明如下。

      参数名

      是否必填

      说明

      数据库

      选择poc_dev库。

      业务背景

      建议填入业务需求的背景信息,以减少沟通成本。

      影响行数

      预估本次导出会影响的数据行数,您可以在SQL Console中使用count命令进行统计。

      变更SQL

      输入如下UPDATE语句。将big_table表中的long_text_b字段的数据批量改为random long text

      UPDATE `big_table` SET `long_text_b` = 'random long text' WHERE id < 1000000;
    4. 工单详情页中,单击分批执行配置按钮,设置以下参数,单击提交修改

      分批执行配置

    5. 确认工单详情信息。

      说明

      您可以在工单详情页中,查看工单的详情信息,同时系统也会对将要执行的SQL进行执行前的预检查,包括SQL语法解析、安全规则中的SQL类型校验、工单提交人的权限检查、预计检查扫描行数等。

    6. 确认信息无误且预检查通过后,单击提交审批,并在弹窗中单击确认

      重要

      在提交审批前,您可以修改工单内容和定时配置,一旦提交审批后,将不能修改相关信息。

  1. 管理员审批并执行工单。

    1. 以管理员账号登录数据管理DMS 5.0

    2. DMS控制台首页我的工单区域,单击待处理工单

    3. 我的工单页面,单击目标工单号

    4. 工单详情页,确认工单变更信息,单击同意

    5. 在审批意见文本框中输入具体意见,并单击确定

    6. 单击执行变更,选择执行时间,并单击确定执行

    7. 单击确定执行后,系统将自动开始执行。

      说明
      • 默认为立即执行,您也可以自行选择开始的执行时间。

      • 若您选择指定结束时间,系统在时间到达后将不再执行未完成的SQL,该功能主要为了防止在高峰期影响业务的运作。

    8. 执行区域,单击详情,并在弹窗中单击执行进度,查看任务执行进展。

  2. 管理员验证任务。

    1. 以管理员账号登录数据管理DMS 5.0

    2. 在数据库实例列表中展开POC_dev实例,双击poc_dev数据库,进入SQL Console页。

    3. SQL Console窗口中,输入如下查询语句,单击执行,此时发现long_text_b字段的数据已被更新。

      SELECT * FROM `big_table`;

      无锁数据变更验证