创建达梦（DM）数据源
达梦（DM）数据库吸收借鉴当前先进新技术思想与主流数据库产品的优点，融合了分布式、弹性计算与云计算的优势，具有灵活性、易用性、可靠性、高安全性等特点。如果您使用的是达梦（DM），在导出Dataphin数据至达梦（DM），您需要先完成达梦...
创建达梦（DM）数据源
达梦（DM）数据库吸收借鉴当前先进新技术思想与主流数据库产品的优点，融合了分布式、弹性计算与云计算的优势，具有灵活性、易用性、可靠性、高安全性等特点。如果您使用的是达梦（DM），在导出Dataphin数据至达梦（DM），您需要先完成达梦...
申请、续期和交还表权限
针对查表数据权限，若部分字段命中不可被申请权限规则，则不可申请表级权限，可申请字段级权限；申请字段级权限时，系统会自动忽略不可申请的字段的权限申请。数据权限审批规则详情请参见 数据权限审批配置。申请创建表的权限时，您需加入...
申请、续期和交还表权限
针对查表数据权限，若部分字段命中不可被申请权限规则，则不可申请表级权限，可申请字段级权限；申请字段级权限时，系统会自动忽略不可申请的字段的权限申请。数据权限审批规则详情请参见 数据权限配置。申请创建表的权限时，您需加入目标...
添加体验空间数据库
本文介绍如何使用 体验空间 数据库。查看空间容量 在数据库列表中的体验空间右侧，或在体验空间数据库详情页的右上角，可以查看当前空间的已使用容量和总容量。说明 在用户上传数据时，系统首先会计算上传文件与当前剩余空间的容量。如果...
审批数据表
本文介绍如何审批已被申请的数据表资产。...在审批单详情页面，显示待审批的数据表申请信息，单击 通过。在审批意见页面，输入通过意见“同意”，操作完成后，单击 确认。预期结果 在已审批的区域中可以查看到已审批的数据表使用申请。
用户组权限管理
管理数据表权限 在数据表权限详情页面，您可以查看数据表基本信息及对数据表执行申请、续期及交还操作。区域 描述 ① 筛选及搜索区 支持快捷筛选 7天内到期 的数据表。您也可以单击 筛选 按钮，按照 表类型、数据板块、所属项目、表环境 ...
用户组权限管理
管理数据表权限 在数据表权限详情页面，您可以查看数据表基本信息及对数据表执行申请、续期及交还操作。区域 描述 ① 筛选及搜索区 支持快捷筛选 7天内到期 的数据表。您也可以单击 筛选 按钮，按照 表类型、数据板块、所属项目、表环境 ...
公开与隐藏数据表资产
将编目的数据表资产公开后，可在发现查看及申请使用，同时，可通过隐藏数据表资产停止对外展示及申请使用。...后续步骤 完成公开后，在发现查看数据表资产详情或申请使用，具体操作，请参见 查看表资产详情 和 申请表资产。
公开与隐藏数据表资产
将编目的数据表资产公开后，可在发现查看及申请使用，同时，可通过隐藏数据表资产停止对外展示及申请使用。...后续步骤 完成公开后，在发现查看数据表资产详情或申请使用，具体操作，请参见 查看表资产详情 和 申请表资产。
MySQL分库分表同步至Hologres（方案1.0）
将分表数据写入目标单表：将源表满足 t_order.*正则表达式的表数据写入到Hologres名为 t_order 的表中，所有满足 t_user.*正则表达式的表数据写入到Hologres名为 t_user 的表中。为表加上统一前缀：在目标名前统一加上 cdo_前缀。schema：...
离线同步数据质量排查
数据类型、时区问题 您的源头表数据类型、数据范围和目标表不一致，导致数据非预期的截断，或者数据写出脏数据失败。数据源头和目标端的时区不一致，导致两侧事件数据查询对比不一致。确认源头和目标类型、时区的差异。确认是否保持现状，...
查看已申请的资产
已申请的资产指在数据资产中心申请并审批通过的资产，包括数据表和API资产。本文介绍如何查看已申请的资产。前提条件 已申请数据表资产，并通过审批。已申请API资产，并通过审批。操作步骤 登录企业数据智能平台。在顶部菜单栏，单击 图标...
查看已申请的资产
已申请的资产指在数据资产中心申请并审批通过的资产，包括数据表和API资产。本文介绍如何查看已申请的资产。前提条件 已申请数据表资产，并通过审批。已申请API资产，并通过审批。操作步骤 登录 数据资源平台控制台。在顶部菜单栏，单击 ...
查看数据集
前提条件 已在系统设置模块中连通云计算资源。背景信息 支持查看和修改数据集详情和查看操作记录。操作步骤 登录 数据资源平台...当需要查看最新的数据时，在临时查询SQL编辑框菜单栏，输入查询脚本，单击 图标，查看当前的表数据最新信息。
Kafka实时ETL同步至Hologres
在 数据输出预览 窗口，您可以根据需要修改输入数据，或者单击 手工构造数据 按钮自定义输入数据，然后单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点处理异常，或者产生脏数据时，也会实时反馈异常信息，能够帮助...
数据扫描和识别
支持扫描的数据源类型如下：结构化数据：RDS、PolarDB、PolarDB-X、MongoDB、OceanBase、自建数据库 非结构化数据：OSS 大数据：TableStore、MaxCompute、ADB-MYSQL、ADB-PG 数据源授权完成后需要多长时间完成扫描？DSC 完成数据源授权后，...
自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
上海新能源汽车车辆基础数据
成立以来，数据中心在多源数据融合应用方面做了许多探索，陆续建成了“上海市新能源汽车大数据平台”、“上海市动力电池溯源管理平台”、“上海市加氢站与氢燃料电池汽车公共数据平台”、“GEF6上海能源管理中心平台”，有效发挥了数据在...
数据重排
表数据越大，进行数据重排后，存储优化效果会更好。使用示例 本文将MaxCompute公共数据集TPC-DS中1 TB规格的 customer 表分别以 DISTRIBUTE BY+SORT BY、CLUSTER BY 两种排序方法重排后写入新的数据表，比较写入前后表的大小以验证存储优化...
数据建模
数据建模支持ER模型和维度模型两种数据建模方法，帮助用户完成数据模型、逻辑表的设计和管理。用户可对数据模型的层次结构进行管理，并对逻辑表字段进行设计。字段设计需要在数据标准的约束下，通过模型设计过程中引用标准数据元定义，设置...
MaxFrame概述
使用场景 MaxCompute MaxFrame使用场景如下：熟悉Python开发生态，需要开箱即用的Python开发环境，并快速进行数据科学、大规模数据处理及交互式数据探索等开发。处理数据量大、处理逻辑复杂，需要基于MaxCompute海量数据及弹性计算资源、...
数据集成概述
背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量数据表的同步任务、能够集成多种异构数据源、能够实现对数据源的数据进行轻度预处理、能够实现数据同步任务的调优（例如容错，限速，并发）等。...
常见问题
如何理解开源与云原生的大数据技术与产品？MaxCompute作为大数据平台，对业务数据是否有好的监控手段？MaxCompute的项目发挥什么作用？如何获取MaxCompute中的Accesskey_ID和AccessKey_Secret？现有账号的AccessKey被禁用，创建一个新的...
操作审计
使用详情可参考文档：回收站 MaxCompute表数据恢复：提供数据备份与恢复功能，系统会自动备份数据的历史版本（例如被删除或修改前的数据）并保留一定时间，相关资源可参考：备份与恢复 如何进行节点版本对比与版本回滚？您可以在数据开发...
数据分析：即时快速分析
功能概述 数据分析支持基于个人视角的数据上传、公共数据集、表搜索与收藏、在线SQL取数、SQL文件共享、SQL查询结果下载及用电子表格进行大屏幕数据查看等产品功能。适用场景 适合更多非专业数据开发人员，如数据分析、产品、运营等工作...
存储空间分析
空间占比 表数据量占集群总数据量的比例。计算方法：空间占比=(表的总数据量/集群总数据量)*100%。总数据量 表的总数据量。计算方法如下：方法一：总数据量=热数据量+冷数据量。方法二：总数据量=表记录+普通索引+主键索引+其他。热数据量 ...
产品和业务限制
描述 例外申请方式 购买分析型数据库MySQL版的限制 账户余额大于等于500元现金 请联系技术支持 开通分析型数据库MySQL版的用户限制 用户需实名认证 无 可创建的最大分析型数据库MySQL版数 3个 联系技术支持申请更多 单个分析型数据库...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
Delta Lake概述
对比项 Data Warehouse Data Lake Delta Lake 架构 计算存储一体或分离 计算存储分离 计算存储分离 存储管理 严格、非通用 原生格式 通用格式、轻量级 场景 报表、分析 报表、分析、数据科学 报表、分析、数据科学 灵活性 低 高 较高 数据...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
配置逻辑表数据延迟
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效（离线T+1）且该逻辑表设置了 事件时间 字段，才可配置是否开启数据...
配置逻辑表数据延迟
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效（离线T+1）且该逻辑表设置了 事件时间 字段，才可配置是否开启数据...
MaxCompute物理表和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
MaxCompute物理表和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
代码模式建模
其采用增量更新等方式更新表数据。累加表（ACCUMULATING_SNAPSHOT）：存储事务数据的快照信息，用于积累不确定周期的数据，例如，订单记录快照事实表可包含付款日期，发货日期和收货日期时间点。DWS表：用于合并特定指标的逻辑汇总表，表的...
再次申请已被授权的资产
若需延长资产使用时间，可再次进行资产申请。本文以数据表资产为例介绍如何再次申请资产权限。前提条件 已申请过数据表资产...单击目标数据表名称，在数据表资产详情页面，单击 申请权限，进行数据表资产申请，具体操作，请参见 申请表资产。
使用MaxCompute控制台（离线）
先清空表数据：直接覆盖目标表中相应映射字段的数据。追加：将待上传数据追加至目标表映射字段中。说明 配置映射关系，详情请参见下文步骤2的 预览待上传数据并设置目标表字段。表 3.上传数据至新建表 参数名 描述 表名 自定义表名称。表...
再次申请已被授权的资产
若需延长资产使用时间，可再次进行资产申请。本文以数据表资产为例介绍如何再次申请资产权限。前提条件 已申请过数据表资产...单击目标数据表名称，在数据表资产详情页面，单击 申请权限，进行数据表资产申请，具体操作，请参见 申请表资产。
Hologres物理表和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
- 产品推荐
- 这些文档可能帮助您