CRC32
计算字符串或二进制类型的 expr 的循环冗余校验值。命令格式 bigint crc32(string|binary)参数说明 expr：必填。STRING或BINARY类型。返回值说明 返回BIGINT类型。返回规则如下：输入参数为NULL时，返回结果为NULL。输入参数为空时，返回0...
编码解码函数
循环冗余校验 crc32_encoding 计算数据的循环冗余校验码。str_encode 按照指定的编码格式对字符串进行编码。函数格式 str_encode(value,"utf8",errors="ignore")参数说明 参数名称 数据类型 是否必填 说明 value 任意（自动转为String）是 ...
迁移上云操作
和开源Apache RocketMQ相比，阿里云 云消息队列 ...检查项说明 切流阶段 检查项 切换到 写源集群冗余读 状态 校验目标集群的Topic是否存在 校验源集群的Topic是否存在，以及权限是否正确 校验目标集群客户端是否存在连接 校验目标集群客户...
查看选项
ZRS：同城冗余ZRS 采用多可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一地域（Region）的多个可用区。当某个可用区不可用时，仍然能够保障数据的正常访问。disable-encode-slash 表示不对URL中的正斜线（/）进行编码。...
迁移实施
源地址中有循环软链接（例如：a>b，b>c，c>a，或目录类型的软链接指向其上层目录），则迁移时会永远扫描不完，导致任务数据量一直增长，建议您使用 unlink 命令移除循环软链接。迁移文件中包含如下非常规的磁盘文件类型则不支持迁移：块...
自定义组件API
[QBI特有]数据集维度类型,TimeRegionInBackend,需迁移，防止循环依赖*/dimGranularity?any;最终格式化配置（注：qbi目前是放在styleConfig中，该字段并未被使用）*/*！首先得产品层面统一*/format?QbiFormatModel|FbiFormatModel;排序*/...
迁移实施
源地址中有循环软链接（例如：a>b，b>c，c>a，或目录类型的软链接指向其上层目录），则迁移时会永远扫描不完，导致任务数据量一直增长，建议您使用 unlink 命令移除循环软链接。迁移文件中包含如下非常规的磁盘文件类型则不支持迁移：块...
DataHub成本节省攻略
历史经验告诉我们，读写操作在服务端感知用户的数据内容是一个相对冗余的操作，所以我们让数据使用一个大的buffer来交互，不再去感知真正的数据内容，真正需要用到数据内容的地方再解析出来（例如同步任务），写入时的数据校验全部推到客户...
导入导出限界上下文模型
如果存在，系统会校验是否会导致循环依赖。如果会导致循环继承，系统会提示：该继承父对象会导致循环继承。按照说明准备数据文档，点击或拖拽待导入文件至下图虚线区域内。在二次确认对话框中，单击 确定。确认开始导入后将无法终止，需等...
配置循环SQL节点
循环SQL节点可循环生成SQL语句，再将其分批提交给DMS管理的任意关系型数据库执行，同时，还可以搭配变量，控制SQL循环次数，达到简化SQL循环逻辑、平衡SQL语句对源库产生压力的目的。本文介绍配置循环SQL节点的操作步骤。背景信息 任务编排...
编辑用例
Loop 循环：设置组合当前步骤后的 n 个步骤，并循环执行 n 次。编辑步骤：滑动 在当前步骤前插入已有用例，请输入用例编号：支持在此步骤前插入一条已有用例的 ID，回放时会在此步骤前执行前一条用例操作。步骤注释功能：支持修改步骤名称...
产品优势
采用数据冗余存储机制，将每个对象的不同冗余存储在同一个区域内多个设施的多个设备上，确保硬件失效时的数据持久性和可用性。当数据存入OSS后，OSS会检测和修复丢失的冗余，确保数据持久性和可用性。OSS会周期性地通过校验等方式验证数据...
基本概念
数据冗余机制 OSS使用基于纠删码、多副本的数据冗余存储机制，将每个对象的不同冗余存储在同一个区域内多个设施的多个设备上，确保硬件失效时的数据持久性和可用性。OSS Object操作具有强一致性，当用户收到了上传或复制成功的响应时，则该...
存储冗余概述
对象存储OSS提供本地冗余存储和同城冗余存储两种存储冗余类型，覆盖从单可用区到多可用区的数据冗余机制，以保证数据的持久性和可用性。本地冗余存储（LRS）采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个可用区内...
转换Bucket的存储冗余类型
随着您的业务对数据持久性和服务可用性要求的提高，采用单可用区的数据冗余存储机制的本地冗余存储已不再满足您的业务要求，您可以将Bucket的存储冗余类型从本地冗余存储转换为同城冗余存储，从而具备抵抗可用区级故障的能力。本文介绍如何...
同城冗余
为了实现实例数据的机房级容灾，表格存储 提供了同城冗余功能。通过创建使用同城冗余的实例存储数据，即使当由于断网、断电或者灾难事件导致某个机房不可用时，表格存储 仍能继续提供强一致性的服务。同城冗余功能确保了数据的高可用性和容...
存储冗余
日志服务 提供本地冗余存储和同城冗余存储两种存储冗余类型，覆盖从单可用区到多可用区的数据冗余机制，以保证数据的持久性和可用性。本地冗余存储（LRS）采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个可用区内多...
查看数据校验详情
本文介绍如何查看数据传输服务DTS（Data Transmission Service）数据校验任务的详情。前提条件 已创建并配置数据校验任务，详情请参见 配置数据校验。注意事项 在DTS同步或迁移实例中配置的校验任务，支持在实例详情和校验任务列表查看；...
配置数据校验
本文介绍如何使用数据传输服务DTS（Data Transmission Service）配置数据校验任务，帮助您监控源库与目标库数据的差异。您可以在同步或迁移实例的 高级配置 阶段选择相应的 数据校验方式，或者单独配置数据校验任务，以便及时发现数据不...
校验接口
接口校验页面展示了当前接口所有适用组件的接口校验状态，包括校验通过、校验失败、未校验、校验中四种状态。对于校验中的组件，可中断校验。一旦退出页面或中断校验，则校验中的组件将不再运行。对于校验失败的组件，可将鼠标悬浮在状态...
对象存储OSS
抵扣顺序 OSS存储费用的抵扣顺序为：地域存储包>中国大陆通用存储包＞SCU＞按量计费 抵扣案例 用户A于2021年6月在华东1（杭州）购买了500 GB的 标准-本地冗余存储包 和20 GB的SCU，其6月份在华东1（杭州）地域标准存储（本地冗余）类型文件...
数据校验计费方式
按抽样比例进行HASH校验 的校验模式计费标准与源数据库实例的地域、目标数据库实例的地域、校验的数据量（含单次校验的数据量和校验的次数）等因素有关，详情请参见下表。重要 实际费用请以购买页面和账单为准。数据迁移实例中的全量校验...
管理数据标准待发布对象
流程校验：为您展示权限校验、依赖校验、重名校验、发布校验。说明 由于不同数据标准可能依赖了标准模板的不同版本，因此所有在当前目标环境不存在的版本均需要进行发布。发布顺序按照版本号从小到大进行，但是每个版本的校验流程独立执行...
管理数据标准待发布对象
流程校验：为您展示权限校验、依赖校验、重名校验、发布校验。说明 由于不同数据标准可能依赖了标准模板的不同版本，因此所有在当前目标环境不存在的版本均需要进行发布。发布顺序按照版本号从小到大进行，但是每个版本的校验流程独立执行...
校验物模型数据
在物联网平台为产品定义物模型后，设备上报物模型数据时，物联网平台将按设置的数据校验方式，根据物模型定义进行数据校验。本文介绍数据校验的三种类型。重要 若产品的 数据格式 为 透传/自定义，该产品下设备与物联网平台进行物模型数据...
查看指标校验记录
指标校验记录用于记录质量规则校验指标的结果。本文为您介绍如何查看指标质量规则的校验记录。指标校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 指标 校验记录页面。参数 说明 筛选与搜索 您可以选择 规则异常...
查看指标校验记录
指标校验记录用于记录质量规则校验指标的结果。本文为您介绍如何查看指标质量规则的校验记录。指标校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 指标 校验记录页面。参数 说明 筛选与搜索 您可以选择 规则异常...
CreateBucketDataRedundancyTransition
调用CreateBucketDataRedundancyTransition接口为Bucket创建存储冗余转换任务。注意事项 Bucket所属地域支持转换存储冗余类型。支持转换存储冗余类型的地域：华东1（杭州）、华东2（上海）、华北2（北京）、华北 3（张家口）、华北6...
查看全域数据表校验记录
全域数据表校验记录用于记录质量规则校验全域数据表的结果。本文为您介绍如何查看全域数据表质量规则的校验记录。全域数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 全域数据表 校验记录页面。参数 说明 ...
查看全域数据表校验记录
全域数据表校验记录用于记录质量规则校验全域数据表的结果。本文为您介绍如何查看全域数据表质量规则的校验记录。全域数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 全域数据表 校验记录页面。参数 说明 ...
查看数据源校验记录
数据源校验记录用于记录质量规则校验数据源的结果。本文为您介绍如何查看数据源质量规则的校验记录。数据源校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 数据源 校验记录页面。参数 说明 筛选与搜索 您可以...
查看数据源校验记录
数据源校验记录用于记录质量规则校验数据源的结果。本文为您介绍如何查看数据源质量规则的校验记录。数据源校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 数据源 校验记录页面。参数 说明 筛选与搜索 您可以...
查看实时元表校验记录
实时元表校验记录用于记录质量规则校验实时元表的结果。本文为您介绍如何查看实时元表质量规则的校验记录。实时元表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 实时元表 校验记录页面。参数 说明 筛选与搜索...
查看实时元表校验记录
实时元表校验记录用于记录质量规则校验实时元表的结果。本文为您介绍如何查看实时元表质量规则的校验记录。实时元表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 实时元表 校验记录页面。参数 说明 筛选与搜索...
存储容量单位包SCU
抵扣顺序 OSS存储费用的抵扣顺序为：地域存储包>中国内地通用存储包＞SCU＞按量计费 抵扣案例 用户A于2021年6月在华东1（杭州）购买了500 GB的 标准-本地冗余存储包 和20 GB的SCU，其6月份在华东1（杭州）地域标准存储（本地冗余）类型文件...
查看Dataphin数据表校验记录
Dataphin数据表校验记录用于记录质量规则校验Dataphin数据表的结果。本文为您介绍如何查看Dataphin数据表质量规则的校验记录。Dataphin数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 Dataphin数据表 校验...
查看Dataphin数据表校验记录
Dataphin数据表校验记录用于记录质量规则校验Dataphin数据表的结果。本文为您介绍如何查看Dataphin数据表质量规则的校验记录。Dataphin数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 Dataphin数据表 校验...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
校验记录概述
校验记录用于记录质量规则校验Dataphin数据表、全域数据表、指标、数据源和实时元表的结果并支持查看每一条质量规则的校验结果。权限说明 超级管理员、质量管理员可查看所有校验记录。项目成员可查看自己所加入的项目的校验记录。普通成员...
- 产品推荐
- 这些文档可能帮助您