文档更新动态（2023年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成配置优化 新增Apache Doris数据源的离线集成。...
功能更新动态（2023年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...
通过Navicat for MySQL导出数据库表中的数据
本文为您介绍通过Navicat for MySQL导出MySQL数据库表中的数据到Excel的方法。前提条件 已安装Navicat for MySQL。说明 您可以前往 Navicat官网 下载Navicat for MySQL。背景信息 如果数据库的表需要新增或修改的数据较多，您可以先通过...
一站式HTAP服务
在重度OLAP的业务场景中，通常需要将数据从OLTP数据库中导出，然后将数据迁移并导入到专业的OLAP数据仓库，在数据仓库中进行大规模的分析型查询。专业的数据仓库通常会把每个列的数据以连续的形式保存在存储介质上，并提供向量化模型的执行...
大量数据导出方案
本文将通过示例，为您介绍导出MaxCompute SQL计算结果的方法。说明 本文中所有SDK部分仅以Java举例。概述 您可以通过以下方法导出SQL的运行结果：如果数据比较少，请使用 SQL Task 得到全部的查询结果。如果需要导出某个表或者分区，请使用...
将MySQL数据库的表导出为一个SQL文件
本文为您介绍将云虚拟主机MySQL数据库的表导出为一个SQL文件的方法。前提条件 本地主机已安装SQLyog。说明 您可以前往 SQLyog官网 下载。背景信息 如果您通过云虚拟主机管理控制台，下载并解压缩云虚拟主机数据库的备份文件到本地，则可以...
Tunnel命令常见问题
本文为您介绍使用Tunnel命令过程中的常见问题。问题类别 常见问题 Tunnel Upload Tunnel Upload是否支持通配符或正则表达式？Tunnel Upload对文件大小是否有限制？记录大小是否有限制？是否要使用压缩？同一个表或分区是否可以并行上传数据...
文档修订记录
Tablestore数据源 Tablestore Stream数据源 2023.4.7 新增功能 数据集成 DataWorks数据集成支持使用IoT Reader插件读取物联网企业实例数据服务中提供的系统表、产品表、自定义存储表。IoT数据源 2023年3月更新记录 时间 特性 类别 描述 ...
2021年
2021-03-16 华北2（北京）华东2（上海）华北3（张家口）华东1（杭州）华南1（深圳）西南1（成都）作业超时监控告警 MaxCompute 外部表支持SNAPPY、LZO压缩格式 如果您的数据格式为TEXTFILE，例如JSON，存放在OSS，希望通过外部表读写且支持...
计算成本控制
临时导出的数据如果需要排序，尽量在导出后使用Excel等工具进行排序，避免使用ORDER BY。尽量避免使用DISTINCT关键字，改为多套一层GROUP BY。SELECT COUNT(DISTINCT id)AS cnt FROM table1;可以优化为-SELECT COUNT(1)AS cnt FROM(SELECT ...
2023年
使用do-while节点实现复杂的数据分析 2023-09-20 新增通过跨项目数据访问实现不同地域MaxCompute项目数据迁移 新说明 本文为您介绍如何通过跨项目数据访问实现不同Region的MaxCompute项目数据迁移，包括两种使用场景：同云账号内不同Region...
PyODPS常见问题
本文为您介绍使用PyODPS时的常见问题。问题类别 常见问题 安装PyODPS 安装PyODPS时，提示Warning:XXX not installed，如何解决？安装PyODPS时，提示Project Not Found，如何解决？安装PyODPS时，报错Syntax Error，如何解决？在Mac上安装...
Python SDK常见问题
本文为您介绍Python SDK常见问题，即PyODPS。问题类别 常见问题 安装PyODPS 安装PyODPS时，提示Warning:XXX not installed，如何解决？安装PyODPS时，提示Project Not Found，如何解决？安装PyODPS时，报错Syntax Error，如何解决？在Mac上...
交叉表
交叉表可以显示表中某个字段的汇总值，并对同类数据合并。其中一组列在表的左侧，另一组列在表的上部。行和列的交叉处可以对数据进行多种汇总计算，例如求和、平均值、记数、最大值和最小值。本文为您介绍如何为交叉表添加数据并配置样式。...
创建和查看DataWorks导出任务
迁移助手支持导出周期任务、手动任务、资源、函数、表元数据、数据源、组件、临时查询、数据服务和数据质量等对象，本文为您介绍如何创建和查看导出任务。背景信息 迁移助手支持通过 全量导出、增量导出 和 自选导出 等方式导出任务。不同...
通过SQL Server Management Studio导入...Server数据库数据
背景信息 本文中的源数据库和目标数据库均以Windows操作系统云虚拟主机SQL Server 2008数据库为例，其中，源数据库数据以从SQL Server 2008数据库中导出的数据表（SQL脚本类型）为例。导入数据前，请您了解SQL Server数据库的相关基础知识...
导出全量数据到MaxCompute
如果需要使用MaxCompute备份 表格存储 数据或者迁移 表格存储 数据到MaxCompute中使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到MaxCompute后，您可以使用DataWorks数据分析功能查看...
表详情
当您需要全面了解并高效地使用表数据，您可在 数据管理DMS 的SQL窗口查看表的详细信息，包含表所属库、字段、索引、行数等技术元数据，类目、表描述等业务元数据，以及表权限、表Owner等管理元数据。背景信息 DMS在表详情中引入表的元数据...
导入方式建模
您可将本地表通过Excel的方式导入至DataWorks数据建模中，或将数据建模中的表导出至本地数据仓库中。本文将为您介绍导入与导出表的操作方法。通过导入方式建模 将本地表以Excel的方式导入至数据建模中，导入方法如下。在 维度建模 页面，...
并发导出数据
当使用场景中不关心整个结果集的顺序时，您可以使用并发导出数据功能以更快的速度将命中的数据全部返回。重要 表格存储 Java SDK从5.6.0版本开始支持并发导出数据功能。使用并发导出数据功能时，请确保获取了正确的Java SDK版本。关于Java ...
支持插件列表
本文列出RDS PostgreSQL各版本支持的插件及其版本，帮助您快速确定RDS PostgreSQL实例对各插件的支持情况。说明 如果您的实例实际支持的功能和下表不符，请先升级 内核小版本 至最新版。本页面仅列举了常用插件，更多插件的支持情况，可在...
OOM常见问题排查指南
但是有时候因为查询过于复杂，或者统计信息的问题，数据量会估错，就导致把数据量大的表或者子查询做了build side，这样一来，构建Hash表会消耗大量的内存，导致OOM。如下图所示，执行计划中 Hash(cost=727353.45.627353.35,rows=970902134...
Tablestore外部表
本文将进一步为您介绍如何将来自Tablestore（原OTS）的数据纳入MaxCompute上的计算生态，实现多种数据源之间的无缝连接。背景信息 表格存储（Tablestore）是构建在阿里云飞天分布式系统之上的NoSQL数据存储服务，提供海量结构化数据的存储...
常见问题
搜索索引的数据一致性默认为最终一致，数据写入宽表后需等待1-15秒后才可查询，如果希望数据能更快可查询，请 提交工单 咨询。二级索引的数据一致为强一致，数据写入宽表即可查询。为什么已购买搜索引擎，使用搜索索引还需要单独开通？搜索...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
表分区
PolarDB支持基本的表划分。本节介绍为何以及怎样把划分实现为数据库设计的一部分。简介 划分指的是将逻辑上的一个大表分成一些小的物理上的片。划分有很多益处：在某些情况下查询性能能够显著提升，特别是当那些访问压力大的行在一个分区...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
Quick BI仪表板中图表的导出功能，导出为Excel对于...
详细信息 Quick BI仪表板支持图表数据导出为Excel文件的功能，导出后的字段排布顺序如下：图表为交叉表、明细表的情况下，表内容与导出Excel展示一致。图表为线图、柱图及组合图，导出结果按照“先维度，后度量”的顺序排布，维度及度量...
Hash Clustering
以下是一个简单的实验，使用TPC-H数据集中100GB的 lineitem 表，包含了 int、double、string 等多种数据类型，在数据和压缩方式等完全一样的情况下，对比使用Hash Clustering和未使用Hash Clustering的表存储大小，使用Hash Clustering的表...
边界生成器功能介绍
边界生成器是一款能生产几何面的边界数据，支持多种边界数据编辑功能的小工具，本文介绍边界生成器的详细功能。进入边界生成器 单击 DataV.GeoAtlas地理小工具系列，即可打开 边界生成器 工具页面。边界生成器界面概述 边界生成器界面主要...
时空数据库版本发布记录
本文介绍PolarDB PostgreSQL版时空数据库（Ganos）的版本更新说明。6.X 6.3 类别 说明 新增特性 Trajectory SQL 新增 ST_InsertAttr 函数，支持为轨迹增加新的属性。GeomGrid SQL 新增 ST_Degeneralize 函数，支持将低层级网格分解成高层级...
时空数据库版本发布记录
本文介绍PolarDB PostgreSQL版（兼容Oracle）时空数据库（Ganos）的版本更新说明。6.X 6.3 类别 说明 新增特性 Trajectory SQL 新增 ST_InsertAttr 函数，支持为轨迹增加新的属性。GeomGrid SQL 新增 ST_Degeneralize 函数，支持将低层级...
新功能发布记录
OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...
离线同步常见问题
读取Loghub同步某字段有数据但是同步过来为空 读取Loghub同步少数据 读取Loghub字段映射时读到的字段不符合预期 读取kafka配置了endDateTime来指定所要同步的数据的截止范围，但是在目的数据源中发现了超过这个时间的数据 Kafka中数据量少...
管理模型
导出Excel数据字典。右键单击选中的模型名称，在弹出的菜单中单击 导出数据字典。您可以在 导出元数据设置 页面，过滤选择需要导出的目标实体、字段属性、仅业务和仅物理等属性。筛选完毕，单击右下角的 确定，选择指定路径，即可导出数据...
创建和查看DataWorks导入任务
导入的数据质量规则关联的表如果在目标空间不存在，则在数据质量规则页面上不会展示出这条导入的规则，如果在导入数据质量规则后完成目标表创建，那同样会在表的规则详情页展示出这条导入的规则。数据质量导入步骤会依赖周期任务导入步骤...
OGG插件介绍
二、支持数据库版本 数据库 支持版本 插件版本 Oracle 11g~19c 2.0.2~2.0.8 MySQL 企业版/社区版 2.0.3~2.0.8 三、使用场景 这里以Oracle数据为例，展示一个简单的示例来说明数据的使用方法，例如我们在数据库有一张商品订单表orders（oid ...
SQL Server迁移上云指南
本文为您介绍SQL Server常见的几种迁移上云的方案，您可以根据数据源的位置、各方案使用的工具、各方案的优势与限制等，选择最适合您的上云方案。上云方案简介 上云方案 实现流程 操作步骤 物理备份上云 使用OSS（手动上云）将数据库日志...
高维向量相似度搜索（pgvector）
RDS PostgreSQL支持pgvector插件，提供了一个新的数据类型，能够方便快捷地对高维向量进行检索，是一款功能强大的向量相似度匹配搜索插件。背景 RDS PostgreSQL支持pgvector插件，能够存储向量类型数据，并实现向量相似度匹配，为AI产品...
- 产品推荐
- 这些文档可能帮助您