DMS的集成与开发功能模块,针对数据全生命周期的集成、开发、服务三个阶段提供界面化的功能支持。
功能简介
DMS集成与开发功能模块支持多种计算、存储引擎,支持结构化、半结构化、非结构化数据的实时集成、离线集成、开发、服务,能够满足企业各类数据加工、集成、开发、服务需求。
您可以通过流批一体的数据集成对在线数据进行入仓、加工处理,通过数据开发模块对数仓数据进行分层开发,之后结合数据服务和可视化能力对外提供数据使用和分析服务。您也可以将这些功能作为基础能力集成到您自己的数据平台中使用,建设属于企业独有的数据平台。
产品优势
流批一体技术,支持20多种数据实时、离线集成。
低代码开发。
100%兼容Flink、Spark。
支持链路及开发过程中的数据安全。
分钟级调度。
多环境管理。
应用场景
数据集成
运维:数据容灾、异地多活、数据归档、数据迁移、测试数据生成、运维指标监控、业务指标监控等。
开发:实时报表、日志分析、离线宽表、T+1数据快照、数据聚合、数据清洗、数据脱敏等。
数据开发
数据库开发:跨库开发、定时任务、数据归档、数据迁移、报表开发等。
数仓开发:数据入仓、数据清洗、数据加工、数据分层、报表开发、宽表开发等。
Notebook
Notebook结合大语言模型,可以给业务开发、数据开发、分析师和数据运营同学赋能,提升数据交付效率和数据自助分析的效率。用户使用该功能可以以文档形式交付查询、测试的数据及数据变化趋势等信息。文档交付后,您可以使用DMS提供的问数Agent,全天为您提供问答服务。更多信息,请参见Notebook。
数据传输(DTS)
数据同步
数据同步功能帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。更多信息,请参见数据同步方案概览。
数据迁移
数据迁移功能帮助您实现同构或异构数据源之间的数据迁移,适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。更多信息,请参见数据同步方案概览。
数据订阅
数据订阅功能可以帮助您获取数据库的实时增量数据。更多信息,请参见订阅方案概览。
数据校验
数据校验是DTS提供的用于监控源库与目标库数据差异的功能,支持在不停服的情况下对源库和目标库进行校验,帮助您及时发现数据和结构不一致的问题。更多信息,请参见什么是数据校验。
数据集成
数据开发
数据应用
- 本页导读 (1)
- 功能简介
- 产品优势
- 应用场景
- Notebook
- 数据传输(DTS)
- 数据集成
- 数据开发
- 数据应用