一键实时同步至Kafka
编辑附加字段 单击操作列的 编辑附加字段，可以为目标表在源端字段的基础上增加字段并为字段赋值。支持手动赋值常量与变量。说明 仅在 Topic建立方式 为 自动建Topic 时，可以使用此功能。编辑目标Topic 同步解决方案默认根据源端生成目标...
步骤二、应用搭建
返回编辑器界面，右上角单击 提交，填写变更描述，保存一个版本。点击左侧面板最下方 按钮，查看版本信息。搭建登录功能 单击左侧功能区>页面>添加新页面。在 添加页面 弹窗，选择 页面类型 为 PC，填入 页面名称 为 登录页，选择模板为 ...
配置算法实例
如果字段值为空或错误，检测会报错。dates 列的时间值必须在 待检测日期 时间内。建议时序时间的间隔为5分钟。Power_${ID} 的个数必须与设置的 检测电站数量 保持一致。单次最多上传288条数据。上传的功率时序数据解析成功后，显示功能时序...
Kafka数据接入
String JSON消息字段转化 JSON消息的字段处理方式。消息 Key 格式 或 消息 Value 格式 选择JSON时显示该参数。取值范围如下：全部作为String写入：将所有字段转化为 表格存储 中对应的String。自动识别字段类型：将JSON消息体中的String和...
通过数据同步功能同步Kafka至湖仓版（推荐）
上述参数配置完成后，单击 提交。启动数据同步任务 在 数据同步 页面，选择创建成功的数据同步任务，在 操作 列单击 启动。单击右上角 查询，状态变为 正在启动 即数据同步任务启动成功。数据分析 同步任务成功后，您可以通过 Spark Jar...
MySQL一键实时同步至MaxCompute
为目标字段添加附加字段 单击操作列的 编辑附加字段，可以为目标表在源端字段的基础上增加字段并为字段赋值。支持手动赋值常量与变量。说明 仅在 表建立方式 为 自动建表 时，可以使用此功能。本案例新增字段 execute_time 并为字段赋值...
MySQL一键实时同步至MaxCompute
为目标字段添加附加字段 单击操作列的 编辑附加字段，可以为目标表在源端字段的基础上增加字段并为字段赋值。支持手动赋值常量与变量。说明 仅在 表建立方式 为 自动建表 时，可以使用此功能。本案例新增字段 execute_time 并为字段赋值...
作为Output接入
如果未配置该字段，则默认取消息发送时的系统时间。如果显示值为1970/x/x x:x:x，则说明发送时间配置为0或其他有误的值。0.9及以前版本的 云消息队列 Kafka 版 客户端不支持配置该时间。操作 单击 下载 Key：下载消息的键值。单击 下载 ...
作为Output接入
如果未配置该字段，则默认取消息发送时的系统时间。如果显示值为1970/x/x x:x:x，则说明发送时间配置为0或其他有误的值。0.9及以前版本的 云消息队列 Kafka 版 客户端不支持配置该时间。操作 单击 下载 Key：下载消息的键值。单击 下载 ...
配置并管理实时同步任务
编辑附加字段 单击操作列的 编辑附加字段，可以为目标表在源端字段的基础上增加字段并为字段赋值。支持手动赋值常量与变量。说明 仅在 Topic建立方式 为 自动建Topic 时，可以使用此功能。单击 下一步。如果您前一步中目标数据源使用的 ...
管理敏感数据
说明 提交申请后，请等待审批通过，您可以在控制台首页 我的工单 区域，单击 提交工单 查看权限申请工单的审核进度。审批通过后，您可在SQL Console页面中查询敏感列数据。相关文档 敏感数据管理 敏感数据保护概览 字段安全级别调整
一键实时同步至DataHub
编辑附加字段 单击操作列的 编辑附加字段，可以为目标Topic在源端字段的基础上增加字段并为字段赋值。支持手动赋值常量与变量。说明 仅在 Topic建立方式 为 自动建Topic 时，可以使用此功能。编辑目标Topic结构 目前 自动建表 生成的...
一键实时同步至Hologres
为目标字段添加附加字段 单击操作列的 编辑附加字段，可以为目标表在源端字段的基础上增加字段并为字段赋值。支持手动赋值常量与变量。说明 仅在 表建立方式 为 自动建表 时，可以使用此功能。数据集成附加字段支持的变量字段如下：EXECUTE...
一键实时同步至Elasticsearch
如果来源库没有主键，则您需要单击 图标，自定义主键，即使用其他非主键的一个或几个字段的联合，代替主键进行同步数据时进行去重判断。选择索引建立方式 支持 自动建索引 和 使用已有索引：当 索引建立方式 选择 自动建索引 时，...
全增量实时同步至Hologres
编辑字段类型映射 同步任务存在默认的源端字段类型与目标端字段类型映射，您可以单击表格右上角的 编辑字段类型映射，自定义源端表与目标端表字段类型映射关系，配置完后单击 应用并刷新映射。编辑目标表结构并添加字段。当目标Hologres表...
故障注入
您可以通过故障注入功能向测试应用注入故障，检测应用面对异常时的处理情况。您可以根据检测的情况调整您的应用，以减少应用在正式使用时出现的异常问题。多用于测试环境。配置故障注入规则 登录 SOFAStack 控制台。在左侧菜单栏选择 ...
事件中心
消息通知模板 消息通知模板会作为当指定消息发生时通知给您的内容（如果通知对象为钉钉机器人Webhook，请注意在消息模板中包含创建钉钉机器人Webhook时的关键字）。在 选择联系人 页面选择联系人，然后单击 提交。如果 选择联系人 的列表中...
故障注入
您可以通过故障注入功能向测试应用注入故障，检测应用面对异常时的处理情况。您可以根据检测的情况调整您的应用，以减少应用在正式使用时出现的异常问题。多用于测试环境。功能简介 故障注入流程如下所示：在微服务中，其实现方式为：管控...
无锁数据变更
当业务累积了大量数据时，需要对在线数据与历史数据进行分隔管理，或定期清除表中数据。DMS的无锁数据变更功能将结合表中的主键或非空唯一键，分批对表中的目标数据进行操作，在保证执行效率的同时，尽可能地减小了对数据库性能、空间的...
事件中心
消息通知模板 消息通知模板会作为当指定消息发生时通知给您的内容。如果通知对象为钉钉机器人Webhook，请注意在消息模板中包含创建钉钉机器人Webhook时的关键字。在 选择联系人 页面选择联系人，然后单击 提交。如果 选择联系人 的列表中...
文件核对
单击 关闭异常 按钮，在 关闭异常 面板上填写如下信息，并单击 提交。是否误报：误报：例如 SQL 错误、数据错误或系统异常等，导致与核对预期不符的情况。非误报：判定后确定是异常现象。是否资损：有资损：根据异常数据排查问题并分析原因...
管理数据
在新增表单页面，输入数据并单击 提交。批量导入 进入管理数据页面。在 数据 管理 页面，单击 添加数据，选择 批量导入。在 批量导入数据 页面，阅读 上传文件要求 并单击 图标，下载Excel模板并按照文件要求填写。选择或拖拽上传文件至...
创建AnalyticDB for PostgreSQL表
是否允许为空 设置该字段是否允许为空。主键 设置该字段是否为主键。唯一键 设置该字段是否为唯一键。操作 对于新增的列，您可以进行 保存、取消、删除、上移 和 下移 等操作。对于已有的列，您可以进行 修改、删除、上移 和 下移 等操作。...
服务限流
置空此项时表示匹配所有流量。您可以配置多条匹配条件，多个条件是与的关系，按顺序进行匹配。参数配置如下：字段：可选择系统字段和请求头。字段名：根据字段类型有不同的值。系统字段：包括流量类型、调用方应用名、调用方 IP、服务方...
准备数据
进入业务流程开发面板，并向面板中拖入一个虚拟节点（start）和三个离线同步节点（电量下降趋势数据同步、窃电标志数据同步和指标数据同步）分别填写相应的配置后，单击 提交。拖拽连线将start节点设置为三个离线同步节点的上游节点。配置...
服务熔断
当服务中的服务端接口不稳定，出现频繁超时或错误时，可能会引起服务调用雪崩。您可以对应用开启服务熔断功能，使有故障的服务端及时返回错误，并释放系统资源，提高用户体验和系统性能。功能简介 您可以通过下述操作让故障处于可控范围：...
配置离线数据集成节点
单击 提交执行。选择目标表。源表配置 数据过滤 填写WHERE过滤语句。支持使用变量。推荐分片字段 默认取值为 自动。最大并发数量 选择最大并发数量，默认取值为4。说明 DMS 限制单个租户的并发Spark任务数量，超过4后，任务将会排队执行。...
轮播图
说明 当数据面板中url字段为空时，使用 默认图片 配置项中的图片。填充方式 图片的填充方式，可选：拉伸以充满容器、充满容器 和 居中。描述：轮播图中每张图片的描述样式，可单击 图标控制描述的显隐。背景颜色：描述模块的背景颜色。参数...
新建元表
如果此种数据源的Flink SQL字段类型与原始字段类型为一对多，则先选择原始字段类型，选择原始字段类型后允许编辑，可手动添加精度，例如MySQL、Oracle、PostgreSQL、SQLServer、Hive等数据源。单击 确定，完成字段的添加。步骤四：配置元表...
新建元表
如果此种数据源的Flink SQL字段类型与原始字段类型为一对多，则先选择原始字段类型，选择原始字段类型后允许编辑，可手动添加精度，例如MySQL、Oracle、PostgreSQL、SQLServer、Hive等数据源。单击 确定，完成字段的添加。步骤四：配置元表...
服务熔断
当服务中的服务端接口不稳定，出现频繁超时或错误时，可能会引起服务调用雪崩。您可以对应用开启服务熔断功能，使有故障的服务端及时返回错误，并释放系统资源，提高用户体验和系统性能。功能简介 您可以通过下述操作让故障处于可控范围：...
降采样操作
单击 提交 保存配置。删除降采样配置 重要 删除降采样配置将删除所有降采样配置和相关资源。在MetricStore属性页中，单击页面右上角的 修改，并单击降采样配置对应的 操作。单击 删除降采样配置 关闭降采样功能。降采样任务异常处理 当降...
管理分类分级模板
给实例绑定模板后，系统会根据模板内的识别规则对实例中库表的字段进行分类分级扫描，判断是否有符合该规则的敏感字段并且给字段打上分类分级的标签，还可以保护（例如：敏感列权限访问控制、使用过程进行脱敏等）敏感等级高的字段，并将...
新建普通维度逻辑表
说明 系统在任务提交时，解析开发环境的表和字段血缘关系；发布时，解析生产环境的表和字段血缘关系。单个任务提交或发布时支持解析不超过 10万条 血缘关系，超过则不予记录，在资产目录中无法展示。后续步骤 如果项目的模式为Dev-Prod，则...
新建普通维度逻辑表
说明 系统在任务提交时，解析开发环境的表和字段血缘关系；发布时，解析生产环境的表和字段血缘关系。单个任务提交或发布时支持解析不超过 10万条 血缘关系，超过则不予记录，在资产目录中无法展示。后续步骤 如果项目的模式为Dev-Prod，则...
查看并管理明细及汇总表实例
单击 提交。重跑下游后，下游实例节点数据更新。强制重跑当前实例 在 强制重跑当前实例-逻辑表 对话框中，配置重跑参数。强制重跑范围 描述 全表 强制重跑该逻辑表中的所有字段。指定字段 您可以根据业务需求指定需要重跑的字段，当前逻辑...
查看并管理明细及汇总表实例
单击 提交。重跑下游后，下游实例节点数据更新。强制重跑当前实例 在 强制重跑当前实例-逻辑表 对话框中，配置重跑参数。强制重跑范围 描述 全表 强制重跑该逻辑表中的所有字段。指定字段 您可以根据业务需求指定需要重跑的字段，当前逻辑...
新建事实逻辑表
说明 系统在任务提交时，解析开发环境的表和字段血缘关系；发布时，解析生产环境的表和字段血缘关系。单个任务提交或发布时支持解析不超过 10万条 血缘关系，超过则不予记录，在资产目录中无法展示。后续步骤 如果项目的模式为Dev-Prod，则...
新建事实逻辑表
说明 系统在任务提交时，解析开发环境的表和字段血缘关系；发布时，解析生产环境的表和字段血缘关系。单个任务提交或发布时支持解析不超过 10万条 血缘关系，超过则不予记录，在资产目录中无法展示。后续步骤 如果项目的模式为Dev-Prod，则...
提交物模型消息解析脚本
确认脚本可以正确解析数据后，单击 提交，将该脚本提交到物联网平台系统，以供设备数据上下行时，物联网平台调用该脚本解析数据。步骤四：使用真实设备调试 正式使用脚本之前，请使用真实设备与物联网平台进行上下行消息通信，以验证物联网...
- 产品推荐
- 这些文档可能帮助您