本文介绍流量回放功能的使用流程,帮助您快速掌握如何使用流量回放进行数据源压测。
1、License申请与查看
在云迁移中心页面,依次点击割接->流量回放进入产品界面,首次进入会看到使用引导,第一步为License申请,点击申请License按钮,会自动生成一个License。
申请完成后,可以在页面看到License的过期时间(有效期为三个自然月),点击可以看到当前License
2、Agent管理
License申请完成后,需要进行流量回放Agent的部署,需要您提供一台阿里云的ECS来供CMH进行Agent的部署。
ECS规格建议:8核16G
操作系统建议:CentOS,Alibaba Cloud linux
网络要求:创建的ECS需要和数据源网络打通
其他要求:部署前请自行在ECS安装java
2.1 自动部署
目前,支持自动部署的地域有杭州、上海,如有其他地域的部署需求,请通过售后在线联系我们。
安装前请先开通私网连接服务。
准备好ECS后,点击Agent管理进入Agent的安装页面
点击Agent安装开始安装Agent流程
安装方式选择“自动部署”,依次填写Agent名称、选择地域、选择ECS,完成后,点击提交,CMH会自动完成流量回放Agent的部署流程。
部署过程中,可以看到Agent的部署过程。
部署完成后,可以在Agent列表看到部署的Agent。
2.2 手动部署
2.2.1 公网手动部署
公网手动部署,需要ECS开通公网,CMH可以连接到ECS。
准备好ECS后,点击Agent管理进入Agent的安装页面
点击Agent安装开始安装Agent流程
安装方式选择“手动部署”,依次填写Agent名称、选择公网、填写IP和端口,完成后,点击下一步
在下一步中,会给出该ECS的安装指令,点击拷贝将该指令拷贝后,到ECS粘贴后执行,即可以完成Agent在ECS的部署。
部署完成后,继续点击下一步,然后点击连接按钮,开始与Agent建立连接。
建立连接过程可以在线查看
部署完成后,可以在Agent列表看到部署的Agent。
2.2.2 私网手动部署
私网手动部署,支持的地域有杭州、上海,如有其他地域的部署需求,请通过售后在线联系我们。
安装前请先开通私网连接服务。
准备好ECS后,点击Agent管理进入Agent的安装页面
点击Agent安装开始安装Agent流程
安装方式选择“手动部署”,依次填写Agent名称、选择私网、选择地域,选择VPC,填写IP和端口,完成后,点击下一步
在下一步中,会给出该ECS的安装指令,点击拷贝将该指令拷贝后,到ECS粘贴后执行,即可以完成Agent在ECS的部署。
安装完成后,继续点击下一步,然后点击连接按钮,开始与Agent建立连接。
建立连接过程可以在线查看
部署完成后,可以在Agent列表看到部署的Agent。
2.3 Agent操作
2.3.1 停止
自动部署的Agent,状态为在线时,可以通过点击停止按钮,来关停该Agent
停止后,ECS上Agent会被停止,列表状态为停止,停止状态的Agent不可以执行回放任务。
2.3.2 启动
停止状态的Agent,可以通过点击启动按钮,来启动该Agent
启动后,Agent状态变为在线。
2.3.3 删除
不再使用的Agent,可以在Agent列表进行删除,删除前,需要将该Agent与回放计划进行解绑。
2.4.4 重连
手动部署的Agent,在Agent的断连后,Agent状态会被置为离线,在Agent确认启动后,可以点击重连使CMH与Agent重新建立连接
重连成功后,Agent状态重新置为在线。
3、新建回放计划
3.1 创建计划
创建回放计划之前,需要先按照上文指引完成agent的安装。
完成agent的安装后可进入回放计划的创建,整体业务流程是先创建回放计划,然后在回放计划中创建回放任务,一个回放计划中可以包含多个回放任务。
进入云迁移中心,在 割接-流量回放中,点击新建回放计划即可开始创建回放计划。
第一步:填写基本信息。
目前支持的源端数据库类型与目标端数据库类型包括:
sql文件路径:需要将回放SQL文件上传到Agent的ECS的某个目录下,并将文件绝对路径填在输入框。
agent选择与数据库连通性测试:只能选择处于正常状态的agent,且数据库连通性测试通过后,在完成计划创建后,创建的任务才能被正常执行。
第二步:填写回放计划基本参数,如下图。
3.2 计划详情
完成计划创建后,可以在流量回放的列表中看到所登录账号下的所有的流量回访计划。点击计划标题或者操作中的详情按钮可以进入计划详情。
基本信息:展示计划ID、源数据类型、目标数据类型、最后一次任务状态、创建时间、SQL文件路径等信息。
任务概况:展示当前回放计划下的所有回放任务的整体情况,包括回访执行次数、最近一次回放成功率、成功请求数、总请求数、agent列表等信息。
任务列表:展示当前回访计划下的回放任务列表。
3.3 创建回放任务
完成回放计划的创建后,在回放计划详情中可以创建回放任务(如下图)。
点击“创建任务”后开始创建回放任务,回放任务被创建后不会立即执行,创建后需要手动点击“执行”,所以测试过程中可以放心创建。一些关键参数的释义如下:
选择agent:只能选择正常状态下的agent
模拟客户端参数:回放并发执行线程数。
回放速度因子:速度控制,1表示原速,2表示2倍速度,10表示10倍速度。
是否循环回放:是否循环回放,如果开启循环回放,会忽略“回放速度因子”参数,以最大压力回放,开启循环回放后,根据设置的“回放运行时长”到期自动结束。循环回放过程中对应的写语句,如INSERT,UPDATE等可能会反复报错,建议回放类型只执行DQL。
回放运行时长:运行时间,单位秒,控制任务运行多长时间,到期会自动结束。
schema映射和过滤:例如:schema1:schema2,schema2,只重放schema1、schema2,且schema1映射到schema2。
SQL超时时间:SQL执行的超时时间。
是否commit:是否commit,默认frodo会手动开启事务进行回放,执行完一条SQL后会rollback,如果需要commit,可以设置为是。
是否跳过报错SQL:是否跳过已经报错过的相同SQL指纹的sql,默认关闭。
创建好任务后,在任务列表的行操作中点击“执行”可开始执行该任务。
3.4 查看任务进度
创建任务后,在任务的状态列中点击“查看进度”即可查看任务进度。