自动与手动控制:启用Delta缓存时,必须从远程源获取的数据将自动添加到缓存中。这个过程是完全透明的,不需要任何操作。但是,要预先将数据预加载到缓存中,可以使用cache命令(请参见缓存数据的子集)。使用Spark缓存时,必须手动指定要...
修复自动打散的单表无法直接修改主键的问题。修复查询归档表的timestamp字段概率性结果不正确的问题。修复 rename table 命令被中断之后可能出现的找不到物理分片的问题。修复inspect index在当前数据库包含视图时无法诊断的问题。修复修改...
语法 DROP[TEMPORARY]TABLE[IF EXISTS]tbl_name[,tbl_name].[RESTRICT|CASCADE]说明 删除 PolarDB-X 1.0 数据表与删除原生MySQL数据库表的语法没有区别,系统会自动处理相关物理表的删除操作。更多详情,请参见 DROP TABLE Statement。注意...
客服无法立即解答用户问题,需要与其他相关人员协助及追踪处理问题。工单创建后,会自动分配至相应的处理人员。1.工单模板配置 工单模板,主要包含工单的流程、处理时间、处理人、工单组件等内容。可以根据业务需要,设置多个工单模板,供...
云盘的Pod Pending问题处理,请参见下文 云盘Pod的状态为非Running。NAS的Pod Pending问题处理,请参见下文 NAS Pod的状态为非Running。OSS的Pod Pending问题处理,请参见下文 OSS Pod的状态为非Running。排查PVC处于非Bound问题。云盘的...
云盘的Pod Pending问题处理,请参见下文 云盘Pod的状态为非Running。NAS的Pod Pending问题处理,请参见下文 NAS Pod的状态为非Running。OSS的Pod Pending问题处理,请参见下文 OSS Pod的状态为非Running。排查PVC处于非Bound问题。云盘的...
Delta Lake自动处理以下操作,您永远不要手动执行这些操作:REFRESH TABLE:Delta表始终返回最新信息,因此在更改之后不需要手动调用REFRESH TABLE。添加和删除分区:Delta lake自动跟踪表中的分区集,并在添加或删除数据时更新列表。因此...
NAME_DEST:目的端表名称 TABLE_NAME_SRC:源端表名称 编辑目标表结构 目前 自动建表 生成的MaxCompute表生命周期默认只有30天,并且可能存在字段类型转换,即若目标端数据库中没有与源端一致的数据类型时,同步任务在自动创建目标表时,将...
保存 建表结构 或者选择 使用已有表 时,系统会自动按照 同名映射 原则生成上游列与OSS表列之间的映射,您可根据需要进行调整,支持一个上游列映射到多个OSS表列,不允许多个上游列映射到一个OSS表列,当上游列未配置到OSS表列的映射时,...
MaxCompute支持使用外部表功能查询和...相关文档 MaxCompute支持OSS、Hologres及RDS等多种外部表,具体请参见 OSS外部表、Tablestore外部表、Hologres外部表、RDS外部表、Paimon外部表。外部表的常见问题及解决方式请参见 外部表常见问题。
保存 建表结构 或 选择已有表时,会自动按照 同名映射 原则生成上游列与Hologres表列之间的映射,可根据需要进行调整秒支持一个游列映射到多个Hologres表列,不允许多个上游列映射到一个Hologres表列,当上游列未配置到Hologres表列的映射...
NAME_DEST:目的端数据库名称 TABLE_NAME_DEST:目的端表名称 TABLE_NAME_SRC:源端表名称 单击 下一步 如果您前一步中目标数据源使用的 表建立方式 为 自动建表,则需要在弹出的 自动建表 对话框,单击 开始建表,批量创建目标Hologres表...
是否自动建表 打开或关闭 是否自动建表 开关。开关关闭:如果表不存在,在执行任务时不会自动创建表,任务流会执行失败。开关打开:如果表不存在,在执行任务时会自动创建表,任务流继续执行。OSS:配置项 描述 数据库类型 选择OSS。OSS ...
本节介绍了在AUTO模式数据库中,判断表的主键是Global主键还是Local主键,表的唯一键是Global唯一键还是Local唯一键的方法。主键 在 PolarDB-X 中,主键分为Global主键与Local主键。当创建出的主键:能保证全局唯一,就称为Global主键;只...
详情 单击相应表名后的 详情,您可以进行 查看历史结果、问题处理 和 处理日志 等操作:单击相应规则后的 查看历史记录,即可查看每次调度后的运行记录。您可以针对当前规则的运行情况填写处理意见。操作如下:单击相应规则后的 问题处理。...
说明 目前自动建表生成的MaxCompute表生命周期默认只有30天,并且可能存在字段类型映射,即若目标端数据库中没有与源端一致的数据类型时,同步任务在自动创建目标表时,将自动为源端字段匹配目标端可写入的字段类型。若您需要修改...
说明 目前自动建表生成的MaxCompute表生命周期默认只有30天,并且可能存在字段类型映射,即若目标端数据库中没有与源端一致的数据类型时,同步任务在自动创建目标表时,将自动为源端字段匹配目标端可写入的字段类型。若您需要修改...
保存 建表结构 或者选择 使用已有表 时,系统会自动按照 同名映射 原则生成上游列与Hologres表列之间的映射,您可根据需要进行调整,支持一个上游列映射到多个Hologres表列,不允许多个上游列映射到一个Hologres表列,当上游列未配置到...
使用治理方案模板并配置治理项后,数据治理中心会根据配置的治理项检测目标租户下存在的治理项问题。...后续步骤 治理项问题处理完成后,您可以进入 治理评估 页面,通过治理报告或治理排行榜查看治理成效,详情请参见 查看治理结果。
NAME_DEST:目的端数据库名称 TABLE_NAME_DEST:目的端表名称 TABLE_NAME_SRC:源端表名称 编辑目标表 默认根据源端生成目标表结构,可能存在字段类型转换,即若目标端数据库中没有与源端一致的数据类型时,同步任务在自动创建目标表时,将...
NAME_DEST:目的端表名称 TABLE_NAME_SRC:源端表名称 编辑目标表结构 目前 自动建表 生成的MaxCompute表生命周期默认只有30天,并且可能存在字段类型映射,即若目标端数据库中没有与源端一致的数据类型时,同步任务在自动创建目标表时,将...
NAME_DEST:目的端表名称 TABLE_NAME_SRC:源端表名称 编辑目标表结构 目前 自动建表 生成的MaxCompute表生命周期默认只有30天,并且可能存在字段类型映射,即若目标端数据库中没有与源端一致的数据类型时,同步任务在自动创建目标表时,将...
相关文档 当实例出现慢SQL问题时,您可以使用如下功能进行优化处理:慢SQL SQL洞察和审计 自动SQL优化 自动SQL限流 当实例出现存储空间问题时,您可以使用如下功能进行分析处理:空间分析 空间碎片自动回收 自动空间扩展 当实例出现性能...
支持保留问题数据的规则列表与问题数据口径 目前支持保留问题数据的监控规则,及各规则问题数据的定义,详情请参见:附录:支持保留问题数据的规则列表与问题数据口径。注意事项 目前仅MaxCompute表支持配置保留问题数据功能。目前仅部分...
单击 刷新源表和MaxCompute表映射 将根据您在步骤三配置的目标文件映射规则来生成目标表,若步骤三未配置映射规则,将默认写入与源表同名的目标表,若目标端不存在该同名表,将默认新建。同时,您可以修改表建立方式、为目标表在源有表字段...
单击 刷新源表和MaxCompute表映射 将根据您在步骤三配置的目标文件映射规则来生成目标表,若步骤三未配置映射规则,将默认写入与源表同名的目标表,若目标端不存在该同名表,将默认新建。同时,您可以修改表建立方式、为目标表在源有表字段...
同步时默认将源端数据表写入目的端同名schema或同名表中,同时,您可以通过添加映射规则定义最终写入目的端的schema或表名称,实现将多张表数据写入到同一个目标表中,或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。...
本文为您介绍导致删除或变更节点输出的操作,以及删除或变更节点输出的影响与解决方案。注意事项 若本节点存在下游依赖,删除本节点的节点输出:当下游仅存在一个父节点依赖,可能会导致下游节点成为 孤立节点 不能正常调度。当下游节点还...
处理方法,请参见 如何处理云监控插件进程自动退出问题。排除以上两种情况后,如果云监控插件仍没有心跳,您可以参考以下方案处理。重新安装或升级云监控插件 如果云监控插件之前运行正常,您可以通过重新安装插件来恢复其运行状态;如果云...
为避免此问题,build阶段可以将左表数据按一定规则进行分区,每一个分区各自构建独立散列表,而probe阶段则根据右表每一行所在分区查找对应分区上的散列表进行相应处理。Build阶段 在IMCI中HashMatch的build功能是在DoOpen中完成,实际分为...
4、减小表分区的生命周期,将会带来 如下影响:用户表、物品表:每个分区中会保留全量数据,因此减小用户表、物品表的生命周期不会有很明显的影响,但可能导致无法回滚更早以前的数据。行为表:每个分区中只保留对应小时的增量数据,因此...
您还可以单击 hudi_b.tb_order_3 查看执行批量操作后的最终表结构,如下图所示:自定义目标schema名或表名 全增量同步任务默认将源端数据库、数据表写入目标端同名schema或同名表中,如果目标端不存在该schema或表,将会自动创建。...
背景信息 基于Python语言的易读性、高效开发及开放生态等优势,Python已经成为科学计算、机器学习以及AI开发领域的事实标准和主流编程语言,其整合了数据分析、机器学习等各类第三方包,如Pandas(数据处理与分析)、NumPy(数值计算)、...
修复了读取Hive ORC表 char 类型数据正确性问题。优化了Thriftserver的默认配置。优化E-MapReduce控制台上,Spark服务配置页面的 spark-defaults 页签的配置项名称。优化了Hive on Spark。修复了AQE在Stats缺失情况下数组越界的问题。修复...
数据质量帮助您第一时间感知源端数据的变更与ETL(Extract Transformation Load)中产生的脏数据,自动拦截问题任务,有效阻断脏数据向下游蔓延。避免任务产出不符合预期的问题数据,影响正常使用和业务决策。同时也能显著降低问题处理的...
数据库自治服务DAS支持统一管理、批量管理、智能诊断、安全审计等功能,帮助您实现多种典型应用场景。双11使用场景 每年一度的双11购物狂欢节,数据库自治服务DAS以持续的...最佳实践 处理慢SQL问题 处理CPU使用率高问题 处理存储空间不足问题
目的端数据库名称 TABLE_NAME_DEST:目的端表名称 TABLE_NAME_SRC:源端表名称 编辑目标表 同步解决方案默认根据源端生成目标表结构,可能存在字段类型转换,即若目标端数据库中没有与源端一致的数据类型时,同步任务在自动创建目标表时,...
with()内支持设置的与问题模板有关的参数如下(其他参数说明请参见 在线使用LLM-based NL2SQL):参数名称 参数描述 取值范围 pattern_index_top 召回问题模板的最相近个数。取值范围:[1,10]。默认值为2,表示对当前问题模板只选出最优的2...
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效(离线T+1)且该逻辑表设置了 事件时间 字段,才可配置是否开启数据...
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效(离线T+1)且该逻辑表设置了 事件时间 字段,才可配置是否开启数据...