通过缓存优化性能

自动与手动控制:启用Delta缓存时,必须从远程源获取的数据将自动添加到缓存中。这个过程是完全透明的,不需要任何操作。但是,要预先将数据预加载到缓存中,可以使用cache命令(请参见缓存数据的子集)。使用Spark缓存时,必须手动指定要...

版本发布说明

修复自动打散的单无法直接修改主键的问题。修复查询归档的timestamp字段概率性结果不正确的问题。修复 rename table 命令被中断之后可能出现的找不到物理分片的问题。修复inspect index在当前数据库包含视图时无法诊断的问题。修复修改...

DROP TABLE

语法 DROP[TEMPORARY]TABLE[IF EXISTS]tbl_name[,tbl_name].[RESTRICT|CASCADE]说明 删除 PolarDB-X 1.0 数据表与删除原生MySQL数据库的语法没有区别,系统会自动处理相关物理的删除操作。更多详情,请参见 DROP TABLE Statement。注意...

工单

客服无法立即解答用户问题,需要其他相关人员协助及追踪处理问题。工单创建后,会自动分配至相应的处理人员。1.工单模板配置 工单模板,主要包含工单的流程、处理时间、处理人、工单组件等内容。可以根据业务需要,设置多个工单模板,供...

存储异常问题排查

云盘的Pod Pending问题处理,请参见下文 云盘Pod的状态为非Running。NAS的Pod Pending问题处理,请参见下文 NAS Pod的状态为非Running。OSS的Pod Pending问题处理,请参见下文 OSS Pod的状态为非Running。排查PVC处于非Bound问题。云盘的...

存储异常问题排查

云盘的Pod Pending问题处理,请参见下文 云盘Pod的状态为非Running。NAS的Pod Pending问题处理,请参见下文 NAS Pod的状态为非Running。OSS的Pod Pending问题处理,请参见下文 OSS Pod的状态为非Running。排查PVC处于非Bound问题。云盘的...

迁移指南

Delta Lake自动处理以下操作,您永远不要手动执行这些操作:REFRESH TABLE:Delta始终返回最新信息,因此在更改之后不需要手动调用REFRESH TABLE。添加和删除分区:Delta lake自动跟踪中的分区集,并在添加或删除数据时更新列表。因此...

配置并管理实时同步任务

NAME_DEST:目的端名称 TABLE_NAME_SRC:源端名称 编辑目标结构 目前 自动 生成的MaxCompute生命周期默认只有30天,并且可能存在字段类型转换,即若目标端数据库中没有源端一致的数据类型时,同步任务在自动创建目标时,将...

Kafka单实时入湖OSS(HUDI)

保存 建结构 或者选择 使用已有 时,系统会自动按照 同名映射 原则生成上游列OSS列之间的映射,您可根据需要进行调整,支持一个上游列映射到多个OSS列,不允许多个上游列映射到一个OSS列,当上游列未配置到OSS列的映射时,...

外部概述

MaxCompute支持使用外部功能查询和...相关文档 MaxCompute支持OSS、Hologres及RDS等多种外部,具体请参见 OSS外部、Tablestore外部、Hologres外部、RDS外部、Paimon外部。外部的常见问题及解决方式请参见 外部常见问题

LogHub(SLS)实时ETL同步至Hologres

保存 建结构 或 选择已有时,会自动按照 同名映射 原则生成上游列Hologres列之间的映射,可根据需要进行调整秒支持一个游列映射到多个Hologres列,不允许多个上游列映射到一个Hologres列,当上游列未配置到Hologres列的映射...

配置并管理实时同步任务

NAME_DEST:目的端数据库名称 TABLE_NAME_DEST:目的端名称 TABLE_NAME_SRC:源端名称 单击 下一步 如果您前一步中目标数据源使用的 建立方式 为 自动,则需要在弹出的 自动 对话框,单击 开始建,批量创建目标Hologres...

创建数据流

是否自动 打开或关闭 是否自动 开关。开关关闭:如果不存在,在执行任务时不会自动创建,任务流会执行失败。开关打开:如果不存在,在执行任务时会自动创建,任务流继续执行。OSS:配置项 描述 数据库类型 选择OSS。OSS ...

主键唯一键(AUTO模式)

本节介绍了在AUTO模式数据库中,判断的主键是Global主键还是Local主键,的唯一键是Global唯一键还是Local唯一键的方法。主键 在 PolarDB-X 中,主键分为Global主键Local主键。当创建出的主键:能保证全局唯一,就称为Global主键;只...

查看监控任务

详情 单击相应名后的 详情,您可以进行 查看历史结果、问题处理 和 处理日志 等操作:单击相应规则后的 查看历史记录,即可查看每次调度后的运行记录。您可以针对当前规则的运行情况填写处理意见。操作如下:单击相应规则后的 问题处理。...

MySQL分库分表同步至MaxCompute

说明 目前自动生成的MaxCompute生命周期默认只有30天,并且可能存在字段类型映射,即若目标端数据库中没有源端一致的数据类型时,同步任务在自动创建目标时,将自动为源端字段匹配目标端可写入的字段类型。若您需要修改...

MySQL分库分表同步至MaxCompute

说明 目前自动生成的MaxCompute生命周期默认只有30天,并且可能存在字段类型映射,即若目标端数据库中没有源端一致的数据类型时,同步任务在自动创建目标时,将自动为源端字段匹配目标端可写入的字段类型。若您需要修改...

Kafka实时ETL同步至Hologres

保存 建结构 或者选择 使用已有 时,系统会自动按照 同名映射 原则生成上游列Hologres列之间的映射,您可根据需要进行调整,支持一个上游列映射到多个Hologres列,不允许多个上游列映射到一个Hologres列,当上游列未配置到...

处理治理项问题

使用治理方案模板并配置治理项后,数据治理中心会根据配置的治理项检测目标租户下存在的治理项问题。...后续步骤 治理项问题处理完成后,您可以进入 治理评估 页面,通过治理报告或治理排行榜查看治理成效,详情请参见 查看治理结果。

配置并管理实时同步任务

NAME_DEST:目的端数据库名称 TABLE_NAME_DEST:目的端名称 TABLE_NAME_SRC:源端名称 编辑目标 默认根据源端生成目标结构,可能存在字段类型转换,即若目标端数据库中没有源端一致的数据类型时,同步任务在自动创建目标时,将...

一键实时同步至MaxCompute

NAME_DEST:目的端名称 TABLE_NAME_SRC:源端名称 编辑目标结构 目前 自动 生成的MaxCompute生命周期默认只有30天,并且可能存在字段类型映射,即若目标端数据库中没有源端一致的数据类型时,同步任务在自动创建目标时,将...

一键实时同步至MaxCompute

NAME_DEST:目的端名称 TABLE_NAME_SRC:源端名称 编辑目标结构 目前 自动 生成的MaxCompute生命周期默认只有30天,并且可能存在字段类型映射,即若目标端数据库中没有源端一致的数据类型时,同步任务在自动创建目标时,将...

诊断报告

相关文档 当实例出现慢SQL问题时,您可以使用如下功能进行优化处理:慢SQL SQL洞察和审计 自动SQL优化 自动SQL限流 当实例出现存储空间问题时,您可以使用如下功能进行分析处理:空间分析 空间碎片自动回收 自动空间扩展 当实例出现性能...

管理问题数据

支持保留问题数据的规则列表与问题数据口径 目前支持保留问题数据的监控规则,及各规则问题数据的定义,详情请参见:附录:支持保留问题数据的规则列表与问题数据口径。注意事项 目前仅MaxCompute支持配置保留问题数据功能。目前仅部分...

MySQL一键实时同步至MaxCompute

单击 刷新源和MaxCompute映射 将根据您在步骤三配置的目标文件映射规则来生成目标,若步骤三未配置映射规则,将默认写入同名的目标,若目标端不存在该同名,将默认新建。同时,您可以修改建立方式、为目标在源有表字段...

MySQL一键实时同步至MaxCompute

单击 刷新源和MaxCompute映射 将根据您在步骤三配置的目标文件映射规则来生成目标,若步骤三未配置映射规则,将默认写入同名的目标,若目标端不存在该同名,将默认新建。同时,您可以修改建立方式、为目标在源有表字段...

一键实时同步至Hologres

同步时默认将源端数据写入目的端同名schema或同名中,同时,您可以通过添加映射规则定义最终写入目的端的schema或名称,实现将多张数据写入到同一个目标中,或统一将源端某固定前缀的名在写入目标时更新为其他前缀。...

删除或变更节点输出的影响

本文为您介绍导致删除或变更节点输出的操作,以及删除或变更节点输出的影响解决方案。注意事项 若本节点存在下游依赖,删除本节点的节点输出:当下游仅存在一个父节点依赖,可能会导致下游节点成为 孤立节点 不能正常调度。当下游节点还...

如何处理云监控插件异常停止问题

处理方法,请参见 如何处理云监控插件进程自动退出问题。排除以上两种情况后,如果云监控插件仍没有心跳,您可以参考以下方案处理。重新安装或升级云监控插件 如果云监控插件之前运行正常,您可以通过重新安装插件来恢复其运行状态;如果云...

列存索引中HashMatch算子的实现

为避免此问题,build阶段可以将左数据按一定规则进行分区,每一个分区各自构建独立散列表,而probe阶段则根据右每一行所在分区查找对应分区上的散列表进行相应处理。Build阶段 在IMCI中HashMatch的build功能是在DoOpen中完成,实际分为...

数据源

4、减小分区的生命周期,将会带来 如下影响:用户、物品:每个分区中会保留全量数据,因此减小用户、物品的生命周期不会有很明显的影响,但可能导致无法回滚更早以前的数据。行为:每个分区中只保留对应小时的增量数据,因此...

数据集成侧同步任务能力说明

您还可以单击 hudi_b.tb_order_3 查看执行批量操作后的最终结构,如下图所示:自定义目标schema名或名 全增量同步任务默认将源端数据库、数据写入目标端同名schema或同名中,如果目标端不存在该schema或,将会自动创建。...

MaxFrame概述

背景信息 基于Python语言的易读性、高效开发及开放生态等优势,Python已经成为科学计算、机器学习以及AI开发领域的事实标准和主流编程语言,其整合了数据分析、机器学习等各类第三方包,如Pandas(数据处理与分析)、NumPy(数值计算)、...

EMR-4.10.x版本说明

修复了读取Hive ORC char 类型数据正确性问题。优化了Thriftserver的默认配置。优化E-MapReduce控制台上,Spark服务配置页面的 spark-defaults 页签的配置项名称。优化了Hive on Spark。修复了AQE在Stats缺失情况下数组越界的问题。修复...

数据质量概述

数据质量帮助您第一时间感知源端数据的变更ETL(Extract Transformation Load)中产生的脏数据,自动拦截问题任务,有效阻断脏数据向下游蔓延。避免任务产出不符合预期的问题数据,影响正常使用和业务决策。同时也能显著降低问题处理的...

应用场景

数据库自治服务DAS支持统一管理、批量管理、智能诊断、安全审计等功能,帮助您实现多种典型应用场景。双11使用场景 每年一度的双11购物狂欢节,数据库自治服务DAS以持续的...最佳实践 处理慢SQL问题 处理CPU使用率高问题 处理存储空间不足问题

一键实时同步至AnalyticDB for MySQL 3.0

目的端数据库名称 TABLE_NAME_DEST:目的端名称 TABLE_NAME_SRC:源端名称 编辑目标 同步解决方案默认根据源端生成目标结构,可能存在字段类型转换,即若目标端数据库中没有源端一致的数据类型时,同步任务在自动创建目标时,...

自然语言到SQL语言转义(基于大语言模型的NL2SQL)

with()内支持设置的与问题模板有关的参数如下(其他参数说明请参见 在线使用LLM-based NL2SQL):参数名称 参数描述 取值范围 pattern_index_top 召回问题模板的最相近个数。取值范围:[1,10]。默认值为2,表示对当前问题模板只选出最优的2...

配置逻辑数据延迟

维度事实逻辑数据延迟用于自动重跑逻辑在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度事实逻辑数据延迟。使用限制 事实逻辑数据时效须为天时效(离线T+1)且该逻辑设置了 事件时间 字段,才可配置是否开启数据...

配置逻辑数据延迟

维度事实逻辑数据延迟用于自动重跑逻辑在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度事实逻辑数据延迟。使用限制 事实逻辑数据时效须为天时效(离线T+1)且该逻辑设置了 事件时间 字段,才可配置是否开启数据...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
媒体处理 数字证书管理服务(原SSL证书) 共享流量包 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用