使用云数据库Redis版实现即时通信场景中的多端同步
消息存储模型 通常，IM系统的核心架构分为三个部分：消息管理模块、消息同步模块、通知模块。这三个模块的作用如下：消息管理模块主要负责接收和存储消息。消息同步模块主要负责存储和推送下行消息数据及其状态。通知模块主要负责维护第三...
功能简介
系统提供目标端自动建表、源端目标端字段自动映射、批量创建同步任务和引用数据模块进行同步任务配置等多种便捷同步任务创建能力，帮助用户更便捷的完成数据同步配置。在完成数据同步配置后，数据同步模块可对数据同步任务的执行和运行情况...
数据同步
数据同步提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、超图等...
功能简介
数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、...
实时同步能力说明
说明 实时同步模块仅进行增量数据实时同步，若您希望全增量数据实时同步，即一次性将全量数据至目标端，然后增量数据进行实时同步，您可选择 同步解决方案 模块，将源端库持续不停地同步到目标端中，实现目标端对于源端的镜像效果。...
修改实例参数
前提条件 已创建同步或迁移实例，详情请参见 同步方案概览 或 迁移方案概览 中的相关配置文档。注意事项 实例参数只能在模块运行期间修改，模块运行状态可以在控制台 任务管理 页签中的 实例进展 查看。为保证实例的稳定，仅支持修改控制台...
使用数据传输同步数据
操作步骤 说明 本文以同步 OceanBase 数据库的数据至 Kafka 为例，更多详情请参见 数据同步 模块的内容。登录 OceanBase 管理控制台，购买数据同步项目。详情请参见 购买数据同步项目。在 数据传输>数据同步 页面，单击新购买的数据同步...
概述
数据传输是 OceanBase 数据库提供的一种支持同构或异构数据源与 OceanBase 数据库之间进行数据交互的服务，具备在线迁移存量数据和实时同步增量数据的能力。产品功能 数据传输提供可视化的集中管控平台，您只需要进行简单的配置即可实时...
离线同步能力说明
离线同步模块仅支持单表或分库分表数据离线同步至目标端单表，若您需要将多库多表数据同步至目标端多表，您可使用 同步解决方案 中的整库离线同步。更多关于同步方案选择，请参见：选择同步方案概述。离线同步任务配置 您可以通过以下方式...
注册中心同步集群
新增Nacos-Nacos同步任务 在 新增同步任务 页面，填写同步任务相关配置信息：参数 说明 同步集群 选择已新建的同步集群。具体操作，请参见 步骤二：配置注册中心同步集群。源注册中心 根据需要，选择已新建的注册中心作为源注册中心。具体...
复制和删除模块
删除应用主模块同步删除应用后不可恢复，请谨慎操作 删除自定义模块 说明 仅能删除未发布的自定义模块。登录 魔笔。在平台首页，选择 模块管理，进入 模块列表 页面。在指定模块的卡片右上角，单击，在弹出的对话框中进行二次确认，删除...
系统流程
具体操作，请参见 查看已申请的资产 自有权限资产：指从系统设置模块同步过来，并订阅成功的表资产，或在该工作组下创建的资产。具体操作，请参见 查看自有权限资产。我可管理的 展示在数据建模模块创建逻辑表并物理化成功的表资产以及在...
系统流程
具体操作，请参见 查看已申请的资产 自有权限资产：指从系统设置模块同步过来，并订阅成功的表资产，或在该工作组下创建的资产。具体操作，请参见 查看自有权限资产。我可管理的 展示在数据建模模块创建逻辑表并物理化成功的表资产以及在...
添加应用
本文介绍如何创建一个全新的空白应用。操作步骤 登录 魔笔。在平台首页，单击 添加应用。在弹出的对话框中选择...创建应用的同时，会同步在模块管理中创建一个同名的主模块，您也可以在模块编辑页面对此模块进行编辑。具体请参见 模块开发。
如何使用钉钉连接模块集成钉钉侧能力
适用场景 钉钉连接模块通过连接器接入了钉钉开放平台中和组织架构相关的API，用户可以通过调用钉钉连接模块中的集成API和钉钉进行数据的双向同步。模块介绍 钉钉连接模块集成了钉钉开放平台中用户管理、角色管理、角色组管理、部门管理的...
仓库同步
针对三方导入的代码库，默认同步功能模块已启用（“启用”指允许该代码库使用同步功能，但何时触发同步需要在功能内设置），如后续不再有同步需求，可手动关闭同步服务，在源文件页面也将不再显示同步状态标识。步骤二：设置授权账号 设置...
支持的数据源及同步方案
支持的数据源及同步方案 数据集成包括离线同步、实时同步和全增量同步任务三个功能模块，您可以根据各模块对数据源的支持情况，选择对应的功能模块进行同步任务的配置。DataWorks离线同步为您提供数据读取（Reader）和写入插件（Writer）...
数据集成
DataWorks数据集成支持复杂网络环境下的数据同步，您可在数据开发（DataStudio）界面直接 创建离线同步节点，用于离线（批量）数据周期性同步；实时同步任务运维，用于单表或整库增量数据实时同步。本文为您介绍数据同步的相关内容。背景...
实时同步常见问题
本文为您介绍实时同步的相关问题。文档概述 问题分类 相关文档 实时同步任务配置须知 实时同步任务支持哪些数据源？为什么实时同步任务延迟较大？实时同步任务延迟解决方案 实时同步任务为什么不建议使用公网？实时同步字段格式问题 实时...
常见问题
离线同步常见问题 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步传输数据时，脏数据超出限制，是否所有数据都...
新功能发布记录
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户 同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户 数据库至数据库的数据同步项目新增支持匹配规则能力，可以助力用户在数据同步项目中通过简单的配置通配符...
功能特性
MySQL实例间的双向同步 PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步 RDS PostgreSQL间的双向同步 云数据库MongoDB版间的双向同步 云原生内存数据库Tair间的双向同步 一键调转正反向同步 支持将双向同步实例的方向进行调转。...
使用 mPaaS 插件
添加的模块会同步到工程的 mPaaS 目录下，具体结构说明详见 mPaaS 目录结构。产品集更新 点击 mPaaS 产品集更新 选项，可查看产品集信息和状态。点击右下方的 开始更新 后，产品集会升级到最新版本，包括所有添加的模块。当前产品集版本：...
Dataphin集成任务中多表同步是如何同步的
产品名称 Dataphin 产品模块 集成任务，多表同步 概述 本文为您介绍Dataphin管道集成任务中源表选择多表同步是怎样同步的 问题描述 集成任务同步数据中源表选择了多表同步，为什么右边的界面只显示了部分表的字段 问题原因 不清楚选择多表...
跨账号同步ECS主机名
什么是同步ECS主机名 同步ECS主机名，是指通过PrivateZone自动获取ECS服务器实例信息中的主机名配置，然后根据ECS主机名在privateZone中一键生成相应的内网DNS解析记录（即主机名记录）。什么是跨账号同步ECS主机名 跨账号同步ECS主机名是...
计费常见问题
本文汇总了数据传输服务DTS（Data Transmission Service）计费的常见问题。常见问题 Q：按量付费的计费方式下，...A：数据同步具备更多的高级特性，例如在线调整同步对象和MySQL双向同步，且数据同步基于内网传输，可以保证更低的网络延时。
跨账号同步ECS主机名
什么是同步ECS主机名 同步ECS主机名，是指通过内网DNS解析自动获取ECS服务器实例信息中的主机名配置，然后根据ECS主机名在内网DNS中一键生成相应的内网解析记录（即主机名记录）。什么是跨账号同步ECS主机名 跨账号同步ECS主机名是指，例如...
离线同步常见问题
文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步传输数据时，脏数据超出限制，是否...
离线同步并发和限流之间的关系
问题三：为什么我的同步任务并发数配置的很高，但是任务运行速度仍然很慢，为什么我的独享资源组经常等待资源？并发数是指数据同步任务中，可以从源端并行读取和向目标存储端并行写出数据的最大线程数。为了提高数据同步的效率，可以适当...
实时同步任务运维
当您在DataStudio中完成任务开发，并发布至生产环境后，您可以进入运维中心运行实时同步任务，同时，您还可以在运维中心监控任务运行状态、查看任务运行指标等。本文列举实时同步任务的常见运维操作。前提条件 已完成实时同步任务的创建、...
模块开发流程
创建模块 创建应用主模块：创建应用时同步创建的模块，系统自动命名为xxx-主模块，可在模块管理中修改。在应用内和模块内均可进行模型设计，详细操作请参见 添加页面。创建自定义模块：在模块管理页面手动创建的模块。在模块管理中进行模型...
查看数据校验详情
根据实例是否包含增量写入（增量同步或增量迁移）模块，有如下两种情况：不含增量写入模块：全量数据写入完成后开始全量校验。含增量写入模块：说明 全量校验与增量校验任务没有依赖关系，相互之间没有影响。若增量任务为单任务形式（不...
操作指南FAQ
开启版本控制的OSS Bucket在使用极速同步时需要注意什么？其他：如何解决在windows2019操作系统挂载SMB共享失败的问题？混合云存储网关的传输加速是什么？如何使用云存储网关设置MIME类型？文件网关支持哪些字符集？文件网关延迟上传的使用...
常见问题
为什么同步任务结束后目标实例比源实例的数据量小？若同步过程中进行了数据过滤，或者源实例内表碎片较多，迁移完成后目标实例的数据量可能会小于源实例。跨账号数据同步任务，是否支持双向同步？当前仅 RDS MySQL 实例间，支持跨账号的...
跨云账号单向同步云数据库Redis实例
说明 目标云数据库Redis支持的版本为4.0或5.0版本，如需跨版本同步（仅支持从低版本同步到高版本）请提前确认兼容性。例如创建按量付费的云数据库Redis来测试，测试完成后可将该实例释放或转为包年包月。跨云账号同步Redis实例支持集群架构...
跨云账号单向同步云数据库Redis实例
说明 目标云数据库Redis支持的版本为4.0或5.0版本，如需跨版本同步（仅支持从低版本同步到高版本）请提前确认兼容性。例如创建按量付费的云数据库Redis来测试，测试完成后可将该实例释放或转为包年包月。跨云账号同步Redis实例支持集群架构...
表结构配置管理
微信营销、社交互动等模块会向本空间的计算源回流用户数据，这些回流的数据表会自动加入表结构配置列表、调度任务列表，其创建者将显示为API同步。微信营销模块回流微信公众号粉丝的用户标签表，其数据表别名为对应的微信公众号，底层数据...
数据迁移与同步FAQ
什么是数据迁移、数据同步？DTS的数据迁移与数据同步工作原理是什么？DTS的数据迁移与数据同步有什么区别？使用DTS遇到预检查报错，如何解决？什么是数据迁移、数据同步？数据迁移：将Redis数据库中的数据（即键值对）迁移至另一个Redis...
DataWorks on EMR Serverless StarRocks最佳实践
数据集成 DataWorks为您提供 数据集成 子模块，可实现多种数据源间多种同步场景下的数据同步。数据集成模块介绍请参见 数据集成概述。数据开发与运维中心 DataWorks为您提供 数据开发 与 运维中心 两个子模块，可实现在数据开发中开发并...
如何在应用中直接使用钉钉的组织架构进行组织管理
适用场景 通过使用钉钉组织架构模块，开发者可快速实现钉钉和系统组织架构模块之间的数据同步。模块介绍 钉钉组织架构模块通过引用 系统组织架构模块 和 钉钉连接模块，完成了系统组织架构模块与钉钉组织架构模块信息的连接。同时通过系统...
- 产品推荐
- 这些文档可能帮助您