数据集成概述
背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量数据表的同步任务、能够集成多种异构数据源、能够实现对数据源的数据进行轻度预处理、能够实现数据同步任务的调优（例如容错，限速，并发）等。...
客户案例
打造离线实时一体化数据中台，构建统一、完整的大数据应用链路，服务内部几大核心业务。全链路数据治理提高数据可用性，让数据在中台进行自由流动，保证数据准确、准时、一致，成本削减1亿元。提高业务迭代效率，数据更新频率由1天变成10...
使用ARMS应用监控数据指标绘制自定义的Grafana大盘
基于ARMS应用监控数据指标的应用场景包括但不仅限于以下三种情况：需要基于ARMS应用监控的数据指标重新绘制数据大盘。在日常运维工作中，通过将ARMS应用监控的数据指标与其他数据源的特定组件的数据指标相结合，绘制专属数据大盘。在网站...
应用场景
数据异地灾备 传输方式：数据同步 如果您的应用程序部署在单个地域中，可能会因为断电、网络中断等不可抗因素而导致服务中断。针对这种情况，您可以在另一个地域构建灾备中心，以提高服务可用性。DTS会在业务中心和灾备中心之间持续同步...
数据标准概述
通过规范约束标准代码、度量单位、字段标准、命名词典，来保障后续建模与应用过程中数据处理的一致性，从源头上保障数据的标准化生产，节约后续数据应用和处理的成本。应用场景 DataWorks的数据标准包含 字段标准、标准代码、度量单位、...
关于我们
阿里云隐私计算产品是源于阿里集团内部数据安全流通的最新解决方案和实践，所以她的提出是基于解决实际的数据安全问题和大数据场景需要，这就决定了她的基因里面就是贴身于实际产业应用。目前团队中拥有全职博士4名，研究型密码学博士实习...
数据标准
数据标准落标说明 数据标准落标的意义在于从源头进行数据的标准化生产，加速数据的融合与统一的效率，节省大量数据应用和处理的成本。完成以下操作实现数据标准落标：您可以在 字段编辑器 页面，编辑 中文名，输入拼音首字母即可快速检索出...
时序引擎应用开发简介
使用OpenTSDB或时间序列数据库TSDB的应用开发步骤 Lindorm时序引擎兼容相关接口，对于已有使用OpenTSDB或者时间序列数据库TSDB的应用程序，您可以按照以下步骤进行应用迁移：应用适配 修改应用程序中的连接字符串，连接的目标从原有的...
创建DataV大屏（模板篇）
说明 您也可以通过宜搭首页 我的应用 页签下 创建空白应用，也可以查看和编辑已有的应用。在 页面管理 页面，单击 新建大屏。在 新建大屏 对话框中，输入 页面名称，同时您也可以 选择分组，并单击 确定。在 模板列表 中，选择一个大屏模板...
快速上手可观测链路 OpenTelemetry 版
控制台后，您可以在 可观测链路 OpenTelemetry 版 控制台执行以下操作：应用总览 应用详情 接口调用 查看SQL性能分析 管理应用和标签 可观测链路 OpenTelemetry 版 支持将Java、Go、Python、JS、.NET、C++等语言的应用数据上报至控制台。...
创建DataV大屏（空白画布篇）
说明 您也可以通过宜搭首页 我的应用 页签下 创建空白应用，也可以查看和编辑已有的应用。在 页面管理 页面，单击 新建大屏。在 新建大屏 对话框中，输入 页面名称，同时您也可以 选择分组，并单击 确定。在 模板列表 页面中，单击下方的 ...
源服务器迁移至轻量应用服务器
轻量应用服务器操作简单便捷，能让您快速上手部署简单的应用。更多信息，请参见 什么是轻量应用服务器。使用限制 不支持将阿里云ECS迁移至阿里云轻量应用服务器。不支持阿里云轻量应用服务器之间相互迁移。不支持Windows系统和Linux系统...
运行及排错
DataWorks为您提供测试运行、补数据和周期运行三种触发方式，帮助您确认实例运行的定时时间、相互依赖关系、数据结果产出是否符合预期。测试运行：手动触发方式。如果您仅需要确认单个节点的定时情况和运行，建议您使用测试运行。详情请...
应用场景
数据分析业务 云数据库 Memcache 版搭配大数据计算服务 MaxCompute。实现对大数据的分布式分析处理，适用于商业分析、挖掘等大数据处理场景。通过数据集成服务可自助实现数据在云数据库 Memcache 版与 MaxCompute 间的同步，简化数据操作...
数据服务概述
前提条件 已购买 数据服务 增值服务，开通Dataphin 常见数据应用问题 一般从需求提出到需求交付分为：需求提出-需求分析-产品设计开发文档-开发人员进行开发-功能测试-功能上线-需求交付，整个过程需要安排迭代、开发、测试，时间周期约为...
入门概览
操作流程 从创建Lindorm实例到Lindorm时序引擎的应用开发，您需要完成以下操作：创建Lindorm实例，创建时选择数据引擎为时序引擎，具体操作请参见 创建实例。设置白名单，具体操作请参见 设置白名单。（推荐）开启用户认证与权限校验，具体...
ListDataServiceApplications
调用ListDataServiceApplications获取数据服务应用的基础信息列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 ...
数据资产等级定义
例如，一个A2等级的数据应用产品对应的导出表Table1、Table2、Table3，几个表都打上 A2-xxx 数据产品标记。根据血缘往上追溯，将这几个表的上游都打上A2的标记，一直标记到源数据业务系统，如图所示。icmsDocProps={'productMethod':'...
数据资产定级
未知性质：无法明确数据的应用场景。标记为Ax。资产等级标记包含毁灭性质为A1、全局性质为A2、局部性质为A3、一般性质为A4、未知性质为Ax。重要程度为A1>A2>A3>A4>Ax。在数据流转链路上，您需要整理消费各个表的应用业务。通过给这些应用...
数据资产定级
未知性质：无法明确数据的应用场景。标记为Ax。资产等级标记包含毁灭性质为A1、全局性质为A2、局部性质为A3、一般性质为A4、未知性质为Ax。重要程度为A1>A2>A3>A4>Ax。在数据流转链路上，您需要整理消费各个表的应用业务。通过给这些应用...
添加宜搭数据源
在宜搭应用的 应用设置 中的 应用数据 页签获取应用编码，如下图所示。应用密钥（必填）宜搭应用平台中已创建表单的应用密钥。在宜搭应用的 应用设置 中的 应用数据 页签获取应用密钥，如下图所示。表单ID（非必填）宜搭应用平台中已创建...
添加宜搭数据源
在宜搭应用的 应用设置 中的 应用数据 页签获取应用编码，如下图所示。应用密钥（必填）宜搭应用平台中已创建表单的应用密钥。在宜搭应用的 应用设置 中的 应用数据 页签获取应用密钥，如下图所示。表单ID（非必填）宜搭应用平台中已创建...
应用画像
系统信息 系统信息是根据ADAM应用采集器采集的应用运行时系统参数，有助于用户评估应用运行状态。对象汇总 对象汇总主要罗列了应用采集与智能分析出的SQL与数据库对象情况汇总，可以直观通过数据看到应用画像的整体内容。对象详情 对象详情...
应用场景
数据审计 智能解析数据库及大数据的通信流量，细粒度审计数据访问行为，通过对数据源全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警，为您最敏感的数据库资产做好最安全的监控保障。个人信息合规 可精准区分和保护个人数据，...
应用场景
大数据场景 云数据库HBase支持海量全量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与Spark、MaxCompute等大数据平台集成，完成数据的大规模离线分析。优势如下：低成本：高压缩比，数据冷热分离，...
ADAM概览
异构数据库迁移ADAM（Advanced Database&Application Migration）提供数据库平滑迁云解决方案，全面评估上云可行性、成本和云存储选型，内置实施协助、数据迁移、应用迁移等工具，覆盖数据库迁移的全生命周期，帮助企业降低数据库和应用...
应用场景
大数据场景：海量数据存储与分析 Lindorm支持海量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与Spark、MaxCompute等大数据平台集成，完成数据的大规模离线分析。优势 低成本：高压缩比，数据冷热分离...
应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云...
导出应用
应用信息 当前导入、导出应用数据时，包含的应用信息如下所示：应用名、应用描述信息、应用所处集群信息、应用实例数 应用程序包、应用镜像 CPU、内存请求与限制值 启动命令、启动参数、环境变量配置 就绪探针、存活探针、启动后脚本、停止...
功能简介
提供自定义监控链路配置能力，快速实现从数据生产到数据应用的全链路编排及溯源和监控节点的稳定性分析。例如，当指标出问题时，加工这个指标的全局链路上，涉及系统的接入、数据的加工、API的转换、系统中的算法加工，到最终指标的呈现，...
全景监控
提供自定义监控链路配置能力，快速实现从数据生产到数据应用的全链路编排及溯源和监控节点的稳定性分析。例如，当指标出问题时，加工这个指标的全局链路上，涉及系统的接入、数据的加工、API的转换、系统中的算法加工，到最终指标的呈现，...
功能简介
提供自定义监控链路配置能力，快速实现从数据生产到数据应用的全链路编排及溯源和监控节点的稳定性分析。例如，当指标出问题时，加工这个指标的全局链路上，涉及系统的接入、数据的加工、API的转换、系统中的算法加工，到最终指标的呈现，...
应用身份识别
B/S结构的应用需要在审计日志中记录数据访问者的真实信息。您的业务为B/S结构时，用户通过访问您的Web应用，Web应用再发起对数据库的访问，来完成一次数据请求。这种情况下，数据库审计系统审计到的请求均为Web应用发起的请求，无法溯源到...
数据库调用
说明 语言 列显示 图标的应用为接入应用监控的应用，显示-图标的应用为接入 可观测链路 OpenTelemetry 版 的应用。在左侧导航栏，单击 数据库调用。在 数据库调用 页面，选择数据库，设置时间段。概览 概览 页签下显示数据库的调用关系拓扑...
东软案例
东软集团围绕运营商、政务云和汽车等行业新一代数字信息系统IT运维场景海量监控数据存储分析痛点，将从遍布全国多地域的手机、平板等终端连接应用系统业务服务的数字足迹和客户数字体验数据、云端&数据中心网络抓包分析数据，应用运行代码...
数据迁移
本文为您介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将...MaxCompute处理业务数据和日志数据后，可以通过Quick BI快速地以可视化方式展现数据处理结果，详情请参见 基于MaxCompute的大数据BI分析。
配置DataHub输出
DataHub是流式数据（Streaming Data）的处理平台，为您提供发布、订阅和分发流式数据的功能，让您可以轻松构建基于流式数据的分析和应用。前提条件 配置DataHub输出节点前，您需要先配置好相应的输入或转换数据源，实时同步支持的数据源。...
添加数据源概述
数据源类型 数据源 说明 数据库类 说明 如果您在其它地域，或者没有使用阿里云数据库，想连接自建数据库，那就需要暴露数据库的公网IP进行连接。DataV当前不支持IP白名单，如果您担心安全性问题，可以使用阿里云提供的数据库连接代理工具来...
ECS应用角色（EMR 3.32之后版本和EMR 4.5之后版本）
在EMR集群之上运行的应用程序通过该角色来获得与其他云服务交互的权限，实现以免AccessKey的方式访问阿里云资源，避免了在配置文件中暴露AccessKey的风险。前提条件 已授权该角色，详情请参见 角色授权。权限内容 默认角色 ...
- 产品推荐
- 这些文档可能帮助您