自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
补数据
为什么进行大量补数据操作时，会出现等待资源情况（实例显示黄色，实例状态为等待资源）？为什么补数据报错调起的节点运行时间不在所选业务时间范围内？为什么有节点选择了补数据，但是没有生成补数据实例？周、月任务如何执行补数据操作 ...
大数据AI公共数据集分析
本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
执行补数据并查看补数据实例（旧版）
本文为您介绍旧版补数据如何执行补数据操作并管理补数据实例。背景信息 周期任务开发完成并提交发布后，任务会按照调度配置定时运行。如果您希望在指定时间段运行周期任务，可使用补数据功能。DataWorks支持的补数据方式如下。补数据模式 ...
执行补数据并查看补数据实例（新版）
本文为您介绍新版补数据如何执行补数据操作并管理补数据实例。背景信息 周期任务开发完成并提交发布后，任务会按照调度配置定时运行。如果您希望在指定时间段运行周期任务，可使用补数据功能。DataWorks支持的补数据方式如下。补数据方式 ...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
操作指南
一、大数据专家服务流程指南 二、服务流程说明 用户可以根据自己实际需要，提前或者在问题发生时购买大数据专家服务，服务项包含大数据技术架构方案咨询、大数据解决方案POC、大数据搬站迁云方案咨询、跨地域迁移支持服务、大数据专家高阶...
视频
图表样式 视频是媒体组件的一种，支持自定义视频的URL地址、视频播放属性、播放器的外观属性等，支持mp4格式的视频，能够在可视化应用中添加视频播放器来播放您的视频。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索...
补数据实例运维概述
对周期任务发起补数据操作后，将根据实例的调度类型产生不同的补数据实例，包括待生成实例、已生成实例。您可以根据业务需求对补数据实例进行运维管理，包括查看运行日志、重跑等操作。名词解释 待生成实例：将在未来时间段生成实例并提交...
补数据实例运维概述
对周期任务发起补数据操作后，将根据实例的调度类型产生不同的补数据实例，包括待生成实例、已生成实例。您可以根据业务需求对补数据实例进行运维管理，包括查看运行日志、重跑等操作。名词解释 待生成实例：将在未来时间段生成实例并提交...
在GDB控制台清除实例数据
如果目标实例下存在只读实例，清除目标实例数据的同时，只读实例的数据会被同步清除，建议您先确保目标实例和只读实例中的数据均不需要使用，然后进行清除数据操作。清除数据大约耗时5s（数据量越多，耗时时间越长），在清除数据过程中建议...
操作审计
如何获取界面一些操作审计日志，比如界面下载数据操作？重要数据如何通过事前设置来获得事后溯源能力？MaxCompute表权限的权限审计 表数据，节点删除如何恢复？如何进行节点版本对比与版本回滚？如何获取界面一些操作审计日志，比如界面...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
数据服务
前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。已根据快速入门教程完成数据开发操作，具体信息请参见 数据开发。操作步骤 登录企业数据智能平台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择 ...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
事务管理
冲突检测规则 下表为作业并发提交场景下，对同一个非分区表或分区的并发数据操作先后结束的冲突规则说明。作业类型 INSERT OVERWRITE/TRUNCATE（后结束）INSERT INTO（后结束）UPDATE/DELETE（后结束）MINOR COMPACT（后结束）MAJOR ...
访问CDC数据
C：新增数据操作。U：更新数据操作。D：删除数据操作。无需配置，Schema中包含默认配置值。cdc_timestamp_lindorm long 该操作记录被Lindorm引擎处理的时间戳。单位为毫秒。spark.sql.catalog.lindorm_cdc.lindormTsEnabled_cdc_timestamp_...
查看并管理已生成实例
已生成实例是对周期任务发起立即运行补数据操作或待生成实例生成的可运行实例。您可以对已生成实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已生成实例。已生成 实例入口 请参见 运维中心入口，...
查看并管理已生成实例
已生成实例是对周期任务发起立即运行补数据操作或待生成实例生成的可运行实例。您可以对已生成实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已生成实例。已生成 实例入口 请参见 运维中心入口，...
内置全密态能力
安全隔离 各实体自身数据库数据明文只有自身可见，合作实体间的数据库操作通过在可信执行环境中鉴权、执行，与按权限加密分发，实现基于全密态数据库的数据操作合作与隔离。多TEE支持 支持Intel SGX、FPGA神盾卡等不同可信执行环境TEE，...
一键MaxCompute任务出错恢复
您可以在DataWorks 运维中心 的 查看周期实例 页面查看该全增量同步任务Merge实例的执行情况，如果Merge任务和全量补数据操作产生冲突，您可以：暂停全量补数据操作，等待Merge任务执行完成后，再执行全量补数据操作。冻结即将运行的Merge...
上传数据
上传数据操作入口 您可以在数据开发的头部菜单栏、业务流程下的表分组或表管理页面中进行上传数据的操作，入口如下所示。在 数据开发 页面的头部菜单栏中。在 数据开发 页面业务流程下的表分组中。标准模式下，在 表管理 页面中，对开发表...
查看并管理已提交实例
已提交实例是对周期任务发起立即运行补数据操作或待提交实例生成的可运行实例。您可以对已提交实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已提交实例。已提交实例 入口 在Dataphin首页，单击顶部...
DML操作
ArgoDB中的DML语句包括插入、更新和删除数据操作。本文为您介绍计算引擎为ArgoDB时Dataphin支持的DML操作语句。权限说明 Dataphin中使用DML语句需要具备写入表数据的权限。配置说明，请参见 申请、续期和交还表权限。目录 插入单条数据 ...
查看并管理已提交实例
已提交实例是对周期任务发起立即运行补数据操作或待提交实例生成的可运行实例。您可以对已提交实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已提交实例。已提交实例 入口 在Dataphin首页，单击顶部...
数据标准建模
前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。操作步骤 登录企业数据智能平台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择 快速入门 工作组。在左侧导航栏，单击 图标。单击 字段标准设计。...
全增量同步任务运维
您可以在DataWorks 运维中心 的 查看周期实例 页面查看该同步任务Merge实例的执行情况，如果Merge任务和全量补数据操作产生冲突，您可以：暂停全量补数据操作，等待Merge任务执行完成后，再执行全量补数据操作。冻结即将运行的Merge实例，...
数据同步
前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。数据同步 登录企业数据智能平台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择 快速入门 工作组。在左侧导航栏，单击 图标。获取物理表，具体步骤...
管理用户账号和数据库
账号权限列表 账号类型 授权类型 操作对象 权限 普通账号 读写 数据库 SHOW DATABASES USE(DATABASE)数据操作 SELECT INSERT DELETE(FROM)CARDINALITY SHOW TAG KEY(EXACT)CARDINALITY SHOW TAG VALUES(EXACT)CARDINALITY SHOW FIELD KEY...
概述
DataWorks的安全中心作为云上大数据体系的安全门户，致力于向您提供面向数据安全生命周期全过程的安全能力，同时在符合安全规范要求的前提下，提供各类安全诊断的最佳实践。其核心功能如下：数据权限管理 安全中心为您提供精细化的数据权限...
开发管控：管理者
MaxCompute数据访问权限控制 恢复数据 操作 说明 相关文档 节点恢复 您可以使用数据开发的回收站还原近期删除的节点。说明 节点还原后，节点ID是新生成的，与原ID不一致。回收站 节点版本对比与回滚 您可在节点或业务流程编辑页面右侧导航...
数据归档至专属存储
费用说明 在DMS数据归档中进行转存数据操作不收取费用，但OSS会收取一定的存储费用，详细信息，请参见 存储费用。操作步骤 进入 数据归档工单列表 页面，视图 选择 工单视图。选择目标工单，单击 操作 列下的 详情。在 执行 区域单击 链路...
新建 TiDB 数据源
建议您为数据迁移项目创建一个专属的数据库用户，该用户必须具备相关的数据操作权限。详情请参见 创建 TiDB 数据库用户。如果您需要订阅 TiDB 增量日志，请准备 Kafka 数据源和 Kafka Topic。并且，请根据 TiDB 官方文档，提前创建 TiDB ...
查看数据风险（新版）
3 在该区域，您可以通过饼状图直观的看到当前租户下 数据访问、数据操作、数据导出 等不同操作类型的风险分布状况。单击目标等级色块，即可看到对应操作类别的风险数量。4 在该区域，您可以选择时间区间，查看指定时间段的风险数量趋势。...
风险识别管理（旧版）
9 规则所属的操作类型 规则项>导出方式 取值包括：全部导出方式 Tunnel下载 表访问 基本信息>规则类型 取值包括：数据访问风险 数据导出风险 数据操作风险 其他 10 规则生效的表 规则项>表名 规则定义>条件设置 区域，选择条件 选择 数据...
数据保护机制
基于上述示例可知，同时在多个MaxCompute项目中拥有访问权限的用户，可以执行在权限范围内允许的跨项目数据操作来流出项目的数据。MaxCompute已提供数据保护机制能力，如果项目中的数据敏感度很高，则需要项目所有者自行设置数据保护机制。...
查看并管理待生成实例
待生成实例是对周期任务发起定时补数据操作时产生的实例，待生成实例将在未来时间段生成可运行实例并提交执行补数据。您可以在待生成实例页面，对待生成实例执行暂停、恢复、重试等操作。本文为您介绍如何查看并管理待生成实例。待生成 ...
查看并管理待提交实例
待提交实例是对周期任务发起定时补数据操作时产生的实例，待提交实例将在未来时间段生成可运行实例并提交执行补数据。您可以在待提交实例页面，对待提交实例执行暂停、恢复、重试等操作。本文为您介绍如何查看并管理待提交实例。待提交 ...
数据迁移
数据迁移和脚本迁移遇到的问题及解决方案请参见 迁移自建Hadoop数据至MaxCompute实践。迁移Oracle数据至MaxCompute，详情请参见 迁移Oracle数据至MaxCompute。迁移消息队列for Apache Kafka集群数据至MaxCompute，详情请参见 迁移消息队列...
数据保护伞概述
细分操作 描述 参考文档 数据操作审计 数据保护伞会记录所有涉及敏感数据的行为（包含IP、端口信息、数据库用户等）及敏感数据血缘信息，您可通过敏感信息进行相关操作审计。同时，针对规则识别不准确的敏感数据，可手动修正。敏感数据概况...
- 产品推荐
- 这些文档可能帮助您